『壹』 使用下载软件在网络上下载电影这种网络应属于什么模式
文件服务器模式。
系统模式是随着网络技术和网络应用的发展而发展的,从文件服务器模式到客户机服务器(C/S)模式,再到浏览器/服务器(B/S)模式,经历了一个较长的发展过程。
从数据库服务器的角度看,B/S模式是从C/S模式发展而来的,但有自己的许多特点,主要是Web与数据库的连接方式不同于C/S模式,B/S模式的协议也不同,主要是基于TCP/IP网络的各层及协议的集合构成网络的体系结构,所以模式变化将引起网络体系结构的变化,也就是与OSI模型对应的网络层及协议将随着模式的变化而变化。
『贰』 谁能仔细解释一下网络爬虫
1 爬虫技术研究综述
引言�
随着网络的迅速发展,万维网成为大量信息的载体,如何有效地提取并利用这些信息成为一个巨大的挑战。搜索引擎(Search Engine),例如传统的通用搜索引擎AltaVista,Yahoo!和Google等,作为一个辅助人们检索信息的工具成为用户访问万维网的入口和指南。但是,这些通用性搜索引擎也存在着一定的局限性,如:�
(1) 不同领域、不同背景的用户往往具有不同的检索目的和需求,通用搜索引擎所返回的结果包含大量用户不关心的网页。�
(2) 通用搜索引擎的目标是尽可能大的网络覆盖率,有限的搜索引擎服务器资源与无限的网络数据资源之间的矛盾将进一步加深。�
(3) 万维网数据形式的丰富和网络技术的不断发展,图片、数据库、音频/视频多媒体等不同数据大量出现,通用搜索引擎往往对这些信息含量密集且具有一定结构的数据无能为力,不能很好地发现和获取。�
(4) 通用搜索引擎大多提供基于关键字的检索,难以支持根据语义信息提出的查询。�
为了解决上述问题,定向抓取相关网页资源的聚焦爬虫应运而生。聚焦爬虫是一个自动下载网页的程序,它根据既定的抓取目标,有选择的访问万维网上的网页与相关的链接,获取所需要的信息。与通用爬虫(general�purpose web crawler)不同,聚焦爬虫并不追求大的覆盖,而将目标定为抓取与某一特定主题内容相关的网页,为面向主题的用户查询准备数据资源。�
1 聚焦爬虫工作原理及关键技术概述�
网络爬虫是一个自动提取网页的程序,它为搜索引擎从万维网上下载网页,是搜索引擎的重要组成。传统爬虫从一个或若干初始网页的URL开始,获得初始网页上的URL,在抓取网页的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件,如图1(a)流程图所示。聚焦爬虫的工作流程较为复杂,需要根据一定的网页分析算法过滤与主题无关的链接,保留有用的链接并将其放入等待抓取的URL队列。然后,它将根据一定的搜索策略从队列中选择下一步要抓取的网页URL,并重复上述过程,直到达到系统的某一条件时停止,如图1(b)所示。另外,所有被爬虫抓取的网页将会被系统存贮,进行一定的分析、过滤,并建立索引,以便之后的查询和检索;对于聚焦爬虫来说,这一过程所得到的分析结果还可能对以后的抓取过程给出反馈和指导。�
相对于通用网络爬虫,聚焦爬虫还需要解决三个主要问题:�
(1) 对抓取目标的描述或定义;�
(2) 对网页或数据的分析与过滤;�
(3) 对URL的搜索策略。�
抓取目标的描述和定义是决定网页分析算法与URL搜索策略如何制订的基础。而网页分析算法和候选URL排序算法是决定搜索引擎所提供的服务形式和爬虫网页抓取行为的关键所在。这两个部分的算法又是紧密相关的。�
2 抓取目标描述�
现有聚焦爬虫对抓取目标的描述可分为基于目标网页特征、基于目标数据模式和基于领域概念3种。�
基于目标网页特征的爬虫所抓取、存储并索引的对象一般为网站或网页。根据种子样本获取方式可分为:�
(1) 预先给定的初始抓取种子样本;�
(2) 预先给定的网页分类目录和与分类目录对应的种子样本,如Yahoo!分类结构等;�
(3) 通过用户行为确定的抓取目标样例,分为:�
a) 用户浏览过程中显示标注的抓取样本;�
b) 通过用户日志挖掘得到访问模式及相关样本。�
其中,网页特征可以是网页的内容特征,也可以是网页的链接结构特征,等等。�
现有的聚焦爬虫对抓取目标的描述或定义可以分为基于目标网页特征,基于目标数据模式和基于领域概念三种。�
基于目标网页特征的爬虫所抓取、存储并索引的对象一般为网站或网页。具体的方法根据种子样本的获取方式可以分为:(1)预先给定的初始抓取种子样本;(2)预先给定的网页分类目录和与分类目录对应的种子样本,如Yahoo!分类结构等;(3)通过用户行为确定的抓取目标样例。其中,网页特征可以是网页的内容特征,也可以是网页的链接结构特征,等等。�
作者: 齐保元 2006-1-10 10:11 回复此发言
--------------------------------------------------------------------------------
2 爬虫技术研究综述
基于目标数据模式的爬虫针对的是网页上的数据,所抓取的数据一般要符合一定的模式,或者可以转化或映射为目标数据模式。�
另一种描述方式是建立目标领域的本体或词典,用于从语义角度分析不同特征在某一主题中的重要程度。�
3 网页搜索策略�
网页的抓取策略可以分为深度优先、广度优先和最佳优先三种。深度优先在很多情况下会导致爬虫的陷入(trapped)问题,目前常见的是广度优先和最佳优先方法。�
3.1 广度优先搜索策略�
广度优先搜索策略是指在抓取过程中,在完成当前层次的搜索后,才进行下一层次的搜索。该算法的设计和实现相对简单。在目前为覆盖尽可能多的网页,一般使用广度优先搜索方法。也有很多研究将广度优先搜索策略应用于聚焦爬虫中。其基本思想是认为与初始URL在一定链接距离内的网页具有主题相关性的概率很大。另外一种方法是将广度优先搜索与网页过滤技术结合使用,先用广度优先策略抓取网页,再将其中无关的网页过滤掉。这些方法的缺点在于,随着抓取网页的增多,大量的无关网页将被下载并过滤,算法的效率将变低。�
3.2 最佳优先搜索策略�
最佳优先搜索策略按照一定的网页分析算法,预测候选URL与目标网页的相似度,或与主题的相关性,并选取评价最好的一个或几个URL进行抓取。它只访问经过网页分析算法预测为“有用”的网页。存在的一个问题是,在爬虫抓取路径上的很多相关网页可能被忽略,因为最佳优先策略是一种局部最优搜索算法。因此需要将最佳优先结合具体的应用进行改进,以跳出局部最优点。将在第4节中结合网页分析算法作具体的讨论。研究表明,这样的闭环调整可以将无关网页数量降低30%~90%。�
4 网页分析算法�
网页分析算法可以归纳为基于网络拓扑、基于网页内容和基于用户访问行为三种类型。�
4.1 基于网络拓扑的分析算法�
基于网页之间的链接,通过已知的网页或数据,来对与其有直接或间接链接关系的对象(可以是网页或网站等)作出评价的算法。又分为网页粒度、网站粒度和网页块粒度这三种。�
4.1.1 网页(Webpage)粒度的分析算法�
PageRank和HITS算法是最常见的链接分析算法,两者都是通过对网页间链接度的递归和规范化计算,得到每个网页的重要度评价。PageRank算法虽然考虑了用户访问行为的随机性和Sink网页的存在,但忽略了绝大多数用户访问时带有目的性,即网页和链接与查询主题的相关性。针对这个问题,HITS算法提出了两个关键的概念:权威型网页(authority)和中心型网页(hub)。�
基于链接的抓取的问题是相关页面主题团之间的隧道现象,即很多在抓取路径上偏离主题的网页也指向目标网页,局部评价策略中断了在当前路径上的抓取行为。文献[21]提出了一种基于反向链接(BackLink)的分层式上下文模型(Context Model),用于描述指向目标网页一定物理跳数半径内的网页拓扑图的中心Layer0为目标网页,将网页依据指向目标网页的物理跳数进行层次划分,从外层网页指向内层网页的链接称为反向链接。�
4.1.2 网站粒度的分析算法�
网站粒度的资源发现和管理策略也比网页粒度的更简单有效。网站粒度的爬虫抓取的关键之处在于站点的划分和站点等级(SiteRank)的计算。SiteRank的计算方法与PageRank类似,但是需要对网站之间的链接作一定程度抽象,并在一定的模型下计算链接的权重。�
网站划分情况分为按域名划分和按IP地址划分两种。文献[18]讨论了在分布式情况下,通过对同一个域名下不同主机、服务器的IP地址进行站点划分,构造站点图,利用类似PageRank的方法评价SiteRank。同时,根据不同文件在各个站点上的分布情况,构造文档图,结合SiteRank分布式计算得到DocRank。文献[18]证明,利用分布式的SiteRank计算,不仅大大降低了单机站点的算法代价,而且克服了单独站点对整个网络覆盖率有限的缺点。附带的一个优点是,常见PageRank 造假难以对SiteRank进行欺骗。�
4.1.3 网页块粒度的分析算法�
在一个页面中,往往含有多个指向其他页面的链接,这些链接中只有一部分是指向主题相关网页的,或根据网页的链接锚文本表明其具有较高重要性。但是,在PageRank和HITS算法中,没有对这些链接作区分,因此常常给网页分析带来广告等噪声链接的干扰。在网页块级别(Block�level)进行链接分析的算法的基本思想是通过VIPS网页分割算法将网页分为不同的网页块(page block),然后对这些网页块建立page�to�block和block�to�page的链接矩阵,�分别记为Z和X。于是,在page�to�page图上的网页块级别的PageRank为�W�p=X×Z;�在block�to�block图上的BlockRank为�W�b=Z×X。�已经有人实现了块级别的PageRank和HITS算法,并通过实验证明,效率和准确率都比传统的对应算法要好。�
4.2 基于网页内容的网页分析算法�
基于网页内容的分析算法指的是利用网页内容(文本、数据等资源)特征进行的网页评价。网页的内容从原来的以超文本为主,发展到后来动态页面(或称为Hidden Web)数据为主,后者的数据量约为直接可见页面数据(PIW,Publicly Indexable Web)的400~500倍。另一方面,多媒体数据、Web Service等各种网络资源形式也日益丰富。因此,基于网页内容的分析算法也从原来的较为单纯的文本检索方法,发展为涵盖网页数据抽取、机器学习、数据挖掘、语义理解等多种方法的综合应用。本节根据网页数据形式的不同,将基于网页内容的分析算法,归纳以下三类:第一种针对以文本和超链接为主的无结构或结构很简单的网页;第二种针对从结构化的数据源(如RDBMS)动态生成的页面,其数据不能直接批量访问;第三种针对的数据界于第一和第二类数据之间,具有较好的结构,显示遵循一定模式或风格,且可以直接访问。�
4.2.1 基于文本的网页分析算法�
1) 纯文本分类与聚类算法 �
很大程度上借用了文本检索的技术。文本分析算法可以快速有效的对网页进行分类和聚类,但是由于忽略了网页间和网页内部的结构信息,很少单独使用。�
2) 超文本分类和聚类算法�
网页文本还具有大量的
『叁』 有谁可以教我怎么从网站下载mv然后上传到我的博客里去啊!!
下载教程】网上电影(流媒体)下载必杀技——绝属精品
如果大家觉得好的话,一定要帮忙顶一下,这样可以让更多的会员看到!
现在大部分朋友都用上宽带了,网上看电影也成了很多人新的生活方式。能不能将这些电影下载到本地硬盘中以便以后欣赏或收集整理、编辑呢?其实,网上丰富的电影资源主要都是一些流媒体文件,几乎可以这样说,凡是可以观看的,都能够把它下载下来。本专题就是要告诉大伙儿如何将网上的电影下载下来。
流媒体格式知多少
目前,在Internet上,传输音视频信息主要有下载和流式传输两种方案。受网络带宽的限制,采用下载方式要花数分钟甚至数小时,因而明显有相当长的延迟,对于视频点播、远程教学等对实时性要求高的多媒体应用来说不合适;而流式传输采用的是边接收边播放的原则(即数据流由流媒体服务器向用户计算机连续、实时地传送,客户机不必等到整个文件全部下载完毕,只需经过几秒或十数秒的缓冲即可观看),有效利用了带宽,它不仅使启动延时大大地缩短,而且不需太大的缓存容量。但是,流媒体文件虽然采用边播放边下载的方式进行,同时也“边丢弃”,所以你别指望在流媒体播放完毕后能够在硬盘的临时文件夹中找到它们的踪影(显然,这是为节省客户端存储空间而考虑的)。
流媒体分为视频、音频两类,这里主要讨论视频流,因特网上主要有三家流媒体公司提供相应的流媒体格式。
1.Windows Media
Windows Media是由Microsoft公司推出的一种数据格式,音频、视频、图像以及控制命令脚本等多媒体信息通过这种格式以网络数据包的形式传输,从而实现流式多媒体信息的发布。在网络上传输的内容就称为“ASF Stream”。ASF支持任意的压缩、解压、编码方式,可以使用任何一种底层网络传输协议,灵活性很大。常见的Windows Media有WMV/WMA/ASF/ASX等。WMV(Windows Media Video)用于表现视频,WMA(Windows Media Audio)则是音频文件,ASF( Advanced Streaming Format)则两者都可以使用。ASX则是一种媒体播放列表文件。播放Windows Media流媒体文件的播放器首推微软自己的Windows Media Player(媒体播放器)。这是一款能提供最强的扩展性、灵活性和方便性的多媒体播放软件,可播放很多种类的多媒体格式文件。
2.Real Media
Real Media技术由Real Networks公司推出,在Internet上广受欢迎。它作为较早的因特网流式技术,已成为网络音、视频播放事实上的标准。并且,为了支持一台视频服务器对多台服务器的并发连接,Real Networks公司推出了一种复播技术,使它能够在网络上以树型结构复制服务器,使网络响应不受影响。从Real System G2系统开始,使用了“Sure Stream”技术,对已安装了Sure Stream的视频服务器,服务器端会自动侦测该客户端的Real Player的连接速度。根据客户端不同的拨号速率和带宽,让音频和视频数据流根据相应的带宽传输不同压缩比率的图像,使其始终以流畅的方式播放。Real Media的文件格式通常有.RM/.RA/.RAM,RM一般为视频文件格式,RA为音频文件格式,RAM则是媒体播放列表文件。
3.QuickTime
QuickTime是Apple公司推出的一种流媒体格式,它面向专业视频编辑、Web网站创建和CD-ROM内容制作开发,是数字媒体领域事实上的工业标准。它可以通过Internet提供实时的数字化信息流、工作流与文件回放功能。QuickTime流媒体文件格式为“QuickTime电影(Movie)文件格式”,其扩展名为.MOV。QuickTime技术具有目前最高音频和视频播放质量的播放器,内置Web浏览器插件(Plug-in)技术;支持RTP、RTSP、SDP、FTP和HTTP等多种网络协议;支持多种视频和动画格式。
提示:下载MOV文件的简易方法
MOV的流媒体文件在国内网站上很少看到,但在外国网站上很多,尤其是一些著名歌星的个人官方网站。MOV流媒体文件下载比较有效的方法是在线看完后通过Windows查找*.mov文件,往往就在C盘的Temporary Internet Files文件夹中。
下载HTTP/FTP 协议的电影
对于使用HTTP、FTP协议传播的电影,请不要使用IE直接下载或使用鼠标右键菜单中的“另存为”来保存,推荐使用网际快车(FlashGet)这类下载工具。使用网际快车下载此类协议的电影也要注意正确设置:先单击“工具”菜单下的“选项”,然后在“连接”选项下的“限制”中选中“不限制重试次数”,然后在同一对话框的“协议”选项卡下,把“HTTP”下的“用户代理”改为“Internet Explore 5.x”。这是因为多数服务器会限制下载的总人数,超过这一限制便会报错。
对于使用HTTP协议的WMV/RM等格式流媒体文件都可以按上述方法进行下载。如果页面中的链接是一个RAM文件,则将它下载到本地硬盘后用记事本打开,可以见到类似“RTSP://61.157.237.18/18e/lxj/kangxidadi/**.rm”等字样的链接。将此链接复制到后文将要提到的StreamBox VCR或影音传送带中就可以实现下载。
当然这样设置后也未必能够绝对下载,有可能是服务器在该段时间内连接不上,此时你应考虑换个时间再试试(比如凌晨下载人数通常最少)。
对于使用FTP 协议的电影连接也推荐用“Flash Get(Jet Car)”进行下载,如果知道FTP站点地址、登录用户名和密码等,可以仿照这样的格式在浏览器地址栏中输入“FTP://用户名:密码@FTP服务器的IP地址”。登录后在文件夹上单击右键,选择“复制到文件夹”,选择一个本地文件夹,也可以实现下载,不过效果不是太好。如何用网际快车来下载就要注意了。和HTTP协议相比较,FTP可以对每个IP的线程数进行控制,所以没必要多开,因为多开的线程也无法达到下载文件的目的。有些网站上说要“单线程”下载,就是指的这个。由于FlashGet本身是一个多线程下载工具,所以请先调整为单线程。方法是:把下载链接添加到下载任务时,会出现一个属性对话框,将“常规”下“文件分成”后的数字改为“1”,在下载时就会看到只有一个“jet1”在工作,这就是单线程下载了。
此外,很多FTP下载需要密码,则需要在将它添加到下载任务时出现的属性窗口加入:在“属性”窗口的“常规”选项下,勾选“登录到服务器”,然后在下面填写登录到该FTP服务器所需要的用户名和密码。
对于通过FTP方式提供下载的链接,可以使用专门的FTP文件传送、下载工具来下载。这方面的工具很多,方法大同小异,在此简单介绍一下使用国产的FTP工具《流星雨猫眼XFTP》来下载“210.192.96.39”站点上文件的步骤:
① 首先在XFTP软件的“工作视图”中,“FTP服务器”文件夹下点击右键,选择“快速添加新站点”,在“FTP地址”后写入“210.192.96.39”,然后输入用户名和密码,其余项目取默认值,确定。
② 左键单击此新增站点名称,这样便会自动开始连接,如果连接顺利,你会在“连接信息”下见到“"/" is current directory”、“/目录下的文件查找结束”等信息,同时可以在该站点名称下展开文件夹。
③ 选中需要的文件,将它拖动到本地磁盘上。
④ 点击“计划队列”项目,在要下载的文件上点右键,选择“传送”,接下来就慢慢等待XFTP将它下载下来吧。
此外,对于MPEG/AVI等电影格式虽然不是流媒体,但在网上也特别丰富(尤其是在FTP站点上),这些文件通常使用HTTP或者FTP协议,所以这里的方法对它们也有效。
常见流媒体协议
不同的流媒体文件在播放时会用到不同的协议,为了让下载做到有的放矢,很有必要先看看各种流媒体所使用的协议。
1.与其他文件通用的两种协议
实际上流媒体文件本身也是一种文件,所以对于其他文件所使用的协议也是支持的。这两种协议就是HTTP和FTP。
1)HTTP协议
“HTTP协议”就是目前网页上广泛使用的“超文本传输协议”(Hyper Text Transfer Protocol),在某些流媒体传输时也采用该协议。如“http://www.pinghu.net/try/02.asf”这样一个地址中尽管也采用了http协议,但它同样可以直接在Windows media player中播放,又如在浏览器的地址栏中输入“http://61.157.237.18/18f/kh/yzw_101.ram”则首先会将指定的RAM文件下载,然后调用系统中安装的RealOne player来播放该文件中所引用的RM/RA文件。
2)FTP协议
“FTP协议”的全称是“文件传输协议”(File Transfer Protocol),主要用于在因特网上负责传送文件。有些电影是放在FTP服务器上的,通过该协议可以获取它们(需要使用相应的支持FTP协议的下载工具)。
2.最常见的两类流媒体协议
1)MMS协议
MMS的全称是“Microsoft Media Server”(微软媒体服务器),这种协议由微软制定,用来访问并且用于流式接收Windows media服务器中的流文件,也是连接Windows Media单播服务的默认方法。当在Windows Media Player中输入一个URL以便连接播放内容时要使用这个协议,当用 MMS 协议连接到发布点后,服务器会使用“协议翻转”来获得最佳的连接。例如“mms://windows_media_server/sample.asf”这样一个地址中,“windows_media_server”为 Windows Media的服务器名,“SAMPLE.ASF ”是想要使之转化为流的.ASF文件名。在网上播放ASF/WMV文件时,常用这种协议,相应的还有MMST协议。
提示:在数码领域也有个“MMS”,这个“MMS”是多媒体信息服务(Multimedia Messaging Service)的英文缩写,是WAP论坛和3GPP(3rd Generation Partnership Program)制定的移动环境下新的信息服务标准,人们俗称的“彩信”就是它。大家不要搞混淆了。
2)RTSP协议
RTSP(Real Time Streaming Protocol)是由RealNetworks和Netscape共同提出的,是一种实时流协议。该协议定义了一对多应用程序如何有效地通过IP网络传送多媒体数据。RTSP在体系结构上位于RTP和RTCP之上,它使用TCP或RTP完成数据传输。与HTTP相比,HTTP传送HTML,而RTSP传送的是多媒体数据,HTTP请求由客户机发出,服务器做出响应。使用RTSP时,客户机和服务器都可以发出请求,即RTSP可以是双向的。现在很多公司都宣称它们的在线播放器支持RTSP协议(不过微软一直都坚持不支持此协议)。最典型的应用就是用来播放RealMedia文件。
下载MMS协议的电影
微软的WMV电影格式多用MMS协议来播放,这些电影是不能使用《网络蚂蚁》等来下载的(因为这些工具不支持MMS协议)。不过你也不用担心,目前能够下载MMS协议流媒体的工具软件还真是不少。下面我们通过一些例子来看看各个工具的主要用法。
1.HiDownload
HiDownload是一款可以从Web、 FTP站点和MMS站点下载文件的下载管理工具。它允许你以最快的速度下载电影、音乐和MP3等文件。在这里,我们只探讨怎样用它来下载使用MMS协议播放的电影。
例如,进入央视网站的“视听在线”页面(http://www.cctv.com/tvonline/media.html),在页面的下面有羊年春节晚会上的部分节目可供欣赏。我们想要下载其中的相声《马路情歌》,则按下面的步骤进行:
①右键单击该节目右边的媒体播放机图标,从快捷菜单中选择“复制快捷方式”,打开记事本,该快捷方式粘贴进去,发现该快捷方式对应的目标其实就是“javascript:playsrc("MMS://winmedia.cctv.com.cn/specials/2003spring/56k/241894.wmv")”,显然,其中的“MMS://winmedia.cctv.com.cn/specials/2003spring/56k/241894.wmv”便是该节目的真实地址。
②选中并且复制该地址。
③启动HiDownload,点击工具栏上的“增加”按钮,在“增加任务”窗口中将上述地址粘贴到“URL”文本框中,确定返回主界面,即可开始下载。
2.Hi-Net Recorder/Player
HiDownload、《网络鼹鼠》之类的工具虽然可以实现对使用MMS协议的流媒体电影进行下载,但是必须等到下载完毕才能知道所下载文件的内容。如果你希望可以边看边下载,不妨试试“Hi-Net Recorder/Player”。
来自韩国的Hi-Net Recorder/Player 具有播放及录制流媒体功能,可以让你在下载的同时观看所下载的电影的内容,它只支持下载WMV和ASF文件。在Hi-Net Recorder/Player的主界面上的工具按钮既有用来播放文件的(Player),也有用于录制(Rrecorder)的。步骤如下:
①在主界面上单击鼠标右键,从快捷菜单中选择“URL open”项,然后在对话框中输入要下载的流媒体电影的URL链接,单击“Play”(播放)返回主界面。
②如链接有效,稍等片刻便会自动开始播放,同时可见到主窗口中“Recorder”(录制)下的圆形按钮变红。
③单击该红色按钮可以录制,默认将录制的文件保存在c:\temp下。如要修改此路径,则在右键快捷菜单中单击“Preferences”(参数选择),然后在打开的对话框中的“Default Path”(默认路径)下修改;接下来便可以观看并等待Hi-Net Recorder/Player将它下载到硬盘中。
3.Stream Download Project
“Stream Download Project”简称“SDP”,也是一个可以边观看边下载MMS协议流媒体文件的工具。SDP可以让你突破诸多限制,顺利将ASF、ASX、WMV等格式的影片下载回来。
这个软件的界面与《网络蚂蚁》、《网际快车》的风格很不同,没有那样的窗口结构和拖放篮,不过使用上一点也不困难。
① 确认要下载的WMV等文件的观看地址并且复制。
② 在SDP中单击“Open”(打开)按钮,在弹出的窗口中把地址粘贴进去,单击“OK”返回主窗口。
③ 接下来单击“Go”(执行)按钮,窗口中会出现相应的连接信息文字,并在文字说明上方出现一个红色进度条从左到右滚动。当该进度条到最右边时,文件便“躺”在了你的硬盘中,并且会默认自动启动播放器播放刚刚下载的文件。
④ 如果不想下载完毕才启动放映,而是需要在下载的同时观看文件的内容,则可以单击工具栏上的“Preview”(预览)按钮调出预览窗口,通过其上的控制按钮对播放进行控制。
下载RTSP协议的电影
RTSP协议用于播放RM格式的流媒体文件,当我们点击一个使用RTSP协议开头的流媒体链接时,系统会自动调用Real Player 或Real One Layer(系统中应安装有该播放器)来播放。相对于MMS协议的电影来讲,能够支持RTSP协议电影下载的工具不是特别多,但你应该相信它们个个都是精品。或许你有时使用这些工具并不能下载到任何RM电影,但这不是软件的错。还是那句话,只要能够播放便可以下载。
下面介绍两种RTSP协议流媒体的下载工具的用法。
1.Net Transport(影音传送带)
“影音传送带”是目前国内少有的可对MMS(可以多线程)、RTSP(PNA)协议文件进行下载的工具之一。它的优点多多,如下载速度一流,CPU占用率低(尤其在宽带上特别明显)等等。目前支持 HTTP、FTP、MMS和 RTSP等协议,而且除了RTSP之外的其余协议均可以实现多线程断点续传(只要站点支持)。虽然笔者通常用它来下载RTSP协议的电影。这里仍要提一下该软件对MMS协议的多线程续传功能:因为MMS流每秒的字节数差不多是固定的,这就决定了MMS流本身不能充分利用用户所有的带宽,所以多线程技术在缩短MMS流下载时间方面的效果是立竿见影的。遗憾的是目前的下载软件中,很少有支持MMS多线程下载技术的,而Net Transport正好弥补了这个空白。
如同前面所提到的多数工具一样,软件也会出现一个方便添加任务的“拖放篮”(估计这都是向“蚂蚁”学习而来的,呵呵)。要下载电影,可以把要下载的电影链接作为任务通过该拖放篮来添加,当然也可以不使用拖放篮而是使用工具按钮来操作。
启动“影音传送带”后,单击工具栏上的“新建”按钮,可以弹出“添加新的下载任务”对话框。按照前述方法将地址粘贴到URL后确定,之后开始下载。由于本身是中文软件,所以所有的提示信息一目了然。相信有了前面软件的使用作为基础,添加、删除等操作不会难倒各位了。
影音传送带的几个小技巧:
(1)虽然Net Transport不直接支持PNM协议,但在下载PNM协议文件的时候可以将PNM改成“rtsp://site:7070/...”试试,其中7070是PNM的默认端口号。
(2)如果某RTSP文件不能下载,可以将RTSP改为HTTP,注意去掉RTSP的默认端口号554,将它当作普通文件直接下载。
(3)如果Net Transport不能下载某些HTTP协议文件,这是因为某些站点需要Cookie,而Net Transport默认情况下Cookie是关闭的,打开方法是:依次单击“工具→选项→下载→Cookie→确定”。
(4)下载时不必指定文件存放的类别,下载完成后可以使用拖曳功能移动指定的任务到相应的类别中去。
(5)若要忽略Net Transport的浏览器捕捉,可以右键单击悬浮窗口,然后单击“监视浏览器”,取消前面的小钩。
(6)影音传送带下载RTSP协议的电影,只能开单线程。
(7)流媒体文件经MMS协议下载后是没有索引的,因为下载过程中文件大小是毛估估的不十分精确,也就没有办法添加索引于末尾,此时使用WMP(Windows Media Player)7版本以上只能顺序观看。通过使用任务栏中“制作ASF流索引”功能,不但可以随意拖动播放,而且会修复损坏的部分以及删除时间重复的部分以使影音更流畅。
2.StreamBox VCR
StreamBox VCR是一个名气较大的流媒体下载工具(我个人认为此软件下载RTSP协议文件的能力远不如影音传送带),熟悉它的朋友很多。StreamBox VCR 不但支持点播形式的流节目,也支持现场流节目,而且两者可以同时下载。由于采用了独特的分析技术,所以可以把那些隐藏在ASX后的ASF文件和隐藏在SMIL文件后的RM文件找出来并进行下载,这个功能是挺实用的。StreamBox VCR 支持的流播放协议相当齐全,Http、FTP、RTSP、MMS、PNM 等协议它全部都支持,并可以在下载的时候自动判别。除此之外,支持断线续传、拖放下载等作为下载软件必要的功能它也有,且不同版本的StreamBox VCR可以分别用来下载软件、ASF/WMA和RM/RA格式的流媒体文件。如果要来下载软件,建议用1.0 Beta 2版本;如果要下载MMS协议的流媒体,则使用1.0 beta3版本;而下载RTSP协议的电影,则使用1.0 BETA 3.1为佳。三者用法大同小异。
下面用下载“RTSP://211.18.09.188/*.rm”(RTSP协议)的流媒体来说明方法。
①复制该链接“RTSP://211.18.09.188/*.rm”。
② 启动StreamBox VCR 1.0 beta 3.1,在其主窗口中点右键(第一次运行软件时,会要求输入密码和邮件地址等信息),选择“粘贴”菜单项 ,立即出现“新建项目”窗口,在“下载地址”栏中已经自动填写好了刚才复制的地址(软件可以自动探测剪贴板中的内容),选择一个“保存位置”。如果不熟悉下载协议就选择“自动”让它自动配置。
③ 单击“好”,返回主窗口,可以见到该文件正在被下载。
提示:某些流媒体节目可能是用的pnm://协议播放,如果直接在浏览器地址栏输入这个地址,则会调用Real One Player来播放,要下载这个流媒体节目,请在StreamBox VCR中进行,并且将协议选择为“PNM(HTTP)协议”。
如果你觉得复制粘贴太麻烦,那么就用拖放吧!尽管StreamBox VCR没有NetAnts和网际快车那样的浮动拖放窗口,但它仍然支持鼠标拖放。当在网上找到一个需要下载的数据流文件时,只要直接按住鼠标左键把这个地址链接拖放到StreamBox VCR的主窗口中就可以进行下载。
为了得到理想的下载效果,对StreamBox VCR作一些设置会更有利于今后的使用:在Streambox VCR中,点击“查看/程序设置”,在“Main”(主要)选项中将“最大的下载数”的值设定为10以上,如果你的网络带宽相当大,机器性能强悍,该数值还是大一些为好。进入“Time”(时间设置)选项,将“超时”的值设定大一点,最少要为60,该值较大则允许StreamBox VCR连接服务器的时间也会延长,因为有的服务器反应时间比较慢。如用预设的40秒或者改得更小,常会在连接中一直出现错误提示,使人产生一种错觉(比如下载地址错误、文件不存在,等等)。特别是随着宽带的逐渐普及,在线看电影的朋友越来越多,能够连接上服务器的时间当然会更长一些,所以这个值还是大点为好。
“Time”项下的“重试空闲”的值改为2秒,这样可以使StreamBox VCR在每次遇到连接错误后,与下次重试的间隔短一些。此外,同样是在“Time”选项下,将“不停地重试直至失败”复选框选中,意思是让软件除非是在下载中因不可预知的原因而停止,否则就要进行无限次的连接。然后进入“Connection”(连接)选项,将“带宽”改为“T1 LAN”,不管你的带宽真正是多少,都可以将它设定为T1,从而骗过服务器,使之相信你正用高速宽带与它进行连接,原因是有些服务器会检查你的带宽设置。如果你设置为“56K Modem”或“56K ISDN”这样的低速度,有些服务器就会拒绝连接,从而导致无法正确下载电影。改为“T1 LAN”还可以避免有些电影才下载一部分便报告下载完成。
设置完毕后,单击右方的 “OK”按钮,将设定保存为系统的默认值,这样就不必每次下载之前都来设置了。
用了这么多工具,大家不难看出下载流媒体的主要过程如下:
①先在浏览器中找到要下载的流媒体节目,在其链接上面点鼠标右键,选择“复制快捷方式”,把链接地址复制进系统剪贴板中。
②运行流的下载工具,通过软件提供的添加任务功能添加任务。这些软件几乎都有自动监视剪贴板的功能,所以在URL栏中都会自动把刚才的地址粘贴上去,做一些简单配置(比如选择文件的保存路径和文件名等)。
③返回主窗口,等着软件默默地将电影下载下来吧。
***介绍完这么多下载软件,最后推荐大家使用影音传送带(Net Transport)和网际快车(FlashGet),这两种几乎是全能的下载软件(上面已介绍过了),从实际使用过程中,我个人感觉网际快车的下载稳定性要好于影音传送带。***
挖出隐藏的流媒体文件
前面所说的方法都是针对可以直接找出流媒体文件地址而言的。上述工具的出现,使朋友们不仅可以像以前那样在线观看电影,也能够将自己喜爱的电影下载下来。可是在很多时候,我们打开一个页面后,并没有发现页面中有流媒体文件的地址,但在网页上却有一个内嵌的媒体播放器,而且也能够播放。能播放就说明流媒体文件肯定存在,只是在网页上被隐藏起来了。怎样才能找出隐藏的流媒体文件呢?
1.查看快捷方式所指向的地址
隐藏得比较简单一点的就是不能直接看到文件的真实链接地址。比如前面提到的央视网站上的节目都用“javascript:playsrc( )”来指明其地址。像这样的隐藏地址,只须在相应的节目图标上单击右键,选择“复制快捷方式”,然后在记事本中粘贴,将括号中的内容去掉引号就可以得到文件真实地址。
提示:不要总是试图通过在右键菜单中选择“属性”来查看文件的真实地址,比如央视网站上那些节目图标。如果查看其属性,你会发现它们其实只是一些GIF图片文件——因为你查看的是“图标”的属性,而不是该图标到底链接到了何方。
2.分析网页文件的源代码找出关键字
有些网站上的节目,用第一种方法会无功而返。尽管看起来网页的播放界面和央视网站比较类似(都会出现一个播放控制窗口),但原理大不相同。不过,只要能够播放,文件肯定在。若网页的播放器界面为RealOne Player,说明这可能是一个RM格式的文件(也有可能是RAM文件),根据前面所介绍的协议和文件名对应关系可推测,这个文件应该是采用RTSP协议播放的,且可能是一个用RM作为扩展名的文件。在该页面上点击右键,选择“查看源文件”,系统会用相关联的编辑器打开,在源文件中使用搜索功能查找关键字“rm”,可查到类似 “RTSP://*.*.*/*.rm” 这样一些文字,这正是要找的文件地址。剩下的操作就是复制它,然后再启动影音传送带或StreamBox VCR下载即可。但有时候有的网站会把影片作为一个窗口单独弹出,如果我们用IE打开的话它的IE地址和菜单栏就看不到了。据说腾讯的浏览器可以将它破解,其实不用那么费劲,我们只需要在IE的历史中找到这一页,仍然可以用前述的方法找到其地址。
提示:上面提到“不要总是试图通过在右键菜单中选择‘属性’来查看文件的真实地址”,也不能太绝对。比如有这样一个网页“http://www1.surfingfun.net/works/play.aspx?no=397214”,进入后便会听到歌声(确实存在一个流媒体文件),可是你查看源文件,输入歌曲常见格式的几种扩展名去搜索都不会指明文件的绝对地址。当输入“ASF”查找时会看到“playvoice("2002-10-18-22-13-20-9060000.asf")”字样的文字,但还是不能知道准确地址,甚至你使用下面要提到的嗅探器也找不出有用的东西。但是,当把鼠标移到网页的底部,会发现有一个播放控制图标。右击它查看属性,在这里详细指出了文件的真实位置。因此,多种方法一定要灵活使用。
3.断线法
此法只适用于通过网卡上网的用户,而且只对RM格式片子有用。具体操作如下:进入电影播放页面以后先暂停,在Win98的开始运行菜单里面输入Winipcfg然后回车,这时会弹出一个“IP配置”对话框,然后按播放键开始播放影片,等到播放的的缓冲进度刚刚出来的时候就按“IP配置”对话框中的“全部释放”按钮,这样就会产生断线,Realplay播放器就会报错,错误信息里面就包含了电影的真实地址。需要说明的是Realplay 9.0和它的升级版Realone都修复了这个漏洞,所以我建议大家还是装一个8.0的版本,再安装一个编码升级包,这样用RealVideo9.0编码标准压缩出来的RM文件也照样能看。
4.用嗅探工具嗅探
对于一些隐藏更深、保护更完善的流媒体文件使用上述方法都不能奏效——既看不到快捷方式,也不能查看源文件(例如屏蔽了IE的右键菜单),此时怎么办呢?别着急!不能下载的
『肆』 readminlan原理
Readminlan原理是一种分布式网络技术,它可以将多个计算机连接在一起,形成一个局域网。它使用了一种特殊的协议,叫做“Readminlan”,来实现这一目标。
Readminlan协议使用了一个中心服务器来作为数据传输的中心,其他的节点都会连接到这个中心服务器上。当一台节点想要发送数据时,它会将数据发送到中心服务器上,然后再由中心服务器将数据发送到其他的节点上。
Readminlan协议也使用了一些特定的加密方法来保证数据传输的安全性。这样就能够保证在传输过程中不会出现任何泄露或者遭到黑客入侵的情况。
『伍』 网站运营数据分析通过什么途径
中企动力信息化运营专家认为,需要分析的数据一般包括:哪些改变能吸引更多的网站浏览量(比如点击网络广告进入);哪些网页的点击量最大;网站访问者进入网站的来源;通过什么关键词进入的;网站访问者在各种网页上逗留的时间有多长,等等。当然,最关键的指标是销售转换率(意向客户转化率)有多高,网站的注册人数有多少,每个客户的成本是多少等等。此外,企业还希望了解新的措施(如,定制新的当日递送的价格,为提高销售量在网站上开展促销活动等)是否有效。网站运营数据分析所需要的数据可以通过多种途径获得: 企业网站的服务器日志记录了用户的IP地址,用户使用的是什么浏览器,进入网站以前他所在的位置,浏览的具体时间,以及用户的注册信息等。通过IP地址,企业可以了解用户所在区域,例如jp表示用户住在日本。 网络跟踪文件是用户在访问网站时在硬盘上自动生成的文件。当客户进入网站并进行操作(例如使用购物车)时这些文件能发挥作用。客户再次访问该网站时,这些文件中的数据可以调出,从而了解该客户浏览的次数等信息。亚马逊网站就是利用网络跟踪器文件在主页上自动生成用户姓名的。 页面标签(page tags)其实就是页面上的一个像元(pixel),用户是看不见的。在用户浏览一个页面时,页面标签被用来激活页面上的一个信息,例如何时将商品从购物车移出等。用户计算机硬盘上的网络跟踪器文件也可以用来激活标签,显示用户何时回访网站,在网站上做了哪些动作。
利用网站解析软件,企业可以对服务器的登录信息进行分析,进而解析用户的行为模式。
中企动力信息化运营专家提醒:目前,谷歌的Analytics和网络统计都是智能的、功能非常强大的用来统计企业网站运营数据的专业工具,用户非常多,备受推崇。
用户下单和付款不一定会在同一天完成,但一周的数据相对是精准的,所以我们把每周数据作为比对的参考对象,主要的用途在于,比对上周与上上周数据间的差别,运营做了某方面的工作,产品做出了某种调整,相对应的数据也会有一定的变化,如果没有提高,说明方法有问题或者本身的问题并在与此。
1. 网站使用率:IP、PV、平均浏览页数、在线时间、跳出率、回访者比率、访问深度比率、访问时间比率。
这是最基本的,每项数据提高都不容易,这意味着要不断改进每一个发现问题的细节,不断去完善购物体验。来说明下重要的数据指标:
1.1 跳出率:跳出率高绝不是好事,但跳出的问题在哪里才是关键。我的经验,在一些推广活动或投放大媒体广告时,跳出率都会很高,跳出率高可能意味着人群不精准,或者广告诉求与访问内容有巨大的差别,或者本身的访问页面有问题。常规性的跳出率我注于登录、注册、订单流程1-3步、用户中心等基础页面,如果跳出率高于20%,我觉得就有不少的问题,也根据跳出率来改进购物流程和用户体验。
1.2 回访者比率=一周内2次回访者/总来访者,意味着网站吸引力,以及会员忠诚度,如果在流量稳定的情况下,此数据相对高一些会比较高,太高则说明新用户开发的太少,太低则说明用户的忠诚度太差,复购率也不会高。
1.3 访问深度比率=访问超过11页的用户/总的访问数,访问时间比率=访问时间在10分钟以上的用户数/总用户数,这两项指标代表网站内容吸引力,数据比率越高越好。
2. 运营数据:总订单、有效订单、订单有效率、总销售额、客单价、毛利润、毛利率、下单转化率、付款转化率、退货率;
每日数据汇总,每周的数据一定是稳定的,主要比对于上上周的数据,重点指导运营内部的工作,如产品引导、定价策略、促销策略、包邮策略等。
2.1 比对数据,为什么订单数减少了?但销售额增加了?这是否是好事?
2.2 对比数据,为什么客单价提高了?但利润率降低了?这是否是好事?
2.3 对比数据,能否做到:销售额增长,利润率提高,订单数增加?这不是不可能。
所有的问题,在运营数据中都能够找到答案。
一、如何入门互联网数据分析
1、网站分析是一种能力
对于大部分人互联网从业者而言,网站分析是一种能力,因为基于网站分析之上的结论可以指导运营、产品、设计、技术的同事的工作。
2、网站分析解决的问题
用户是谁(目标用户),
从哪里来(流量从哪里来,流量的价值等),
到哪里去(为什么离开,如何降低用户流失)
3、对于产品OR运营,网站分析能做什么
产品改版是否合理?
用户的反馈如何?
哪些功能存在问题?
功能使用频率?
转化路径是否靠谱?
对于运营:
用户来源路径?
用户活跃度如何?
如何分配广告预算
网站内容是否有效?
如何分解KPI?
4、为什么进行网站分析
5、网站分析的核心
二、网站分析的流程
定义问题——测量——分析——改进——维持
三、定义问题
如何你已经知道如何有效的去描述一个问题,那么你已经成功了一半了,因为你知道问题,而且也知道如何去问。
工作可不是试券设计好问题来问你,首先得你自己发现问题。
比如如注册转化率的降低就跟非常多的问题是正相关的。
产品支持度是否足够?
头像上传
邮箱验证
必填资料
营销是否到位?
新老访客比如何
外界口碑如何
问题的要素:本质、现象、特征、量化
定义一个问题:即给整个团队确认一个方向,围绕着这个目标往下分解,制定计划,在计划具体执行的过程中发现了某个问题,再来具体分析的。
所以作为一个网站分析师,立足点应该是从公司 战略出发, 了解产品,运营,技术,商业逻辑等等层面的知识,给公司的发展提供大量的建议。
献峰商业&产品&运营&设计,的推荐书单:
豆瓣豆列的推荐人数达 1316人,收藏人数达 6291。目前我读看过的不到十分之一,但是确实有助于从事网站分析的同事提升商业格局。
互联网产品经理 全方位入门
苏杰 老师整理的互联网产品经理全方位入门书籍。豆瓣豆列的推荐人数达986人,收藏人数达 7774。惭愧,只看过豆列里面20%的书。
当当,仅仅通过读书是无法培养行业格局的,还需要善于向人请教、善用网络资源、自己体验、实践等等。
求职互联网数据分析,如何准备行业知识?
四、测量
收集数据。
目前常用的数据流量监测的工作:
Google AnalyticsGoogle 网站分析工具
Omniture Omniture SiteCatalys
网络统计 网络统计工具腾讯分析主要针对论坛
等等。。。。
比如教育行业的数据,可以从一些行业数据收集的网站中找到
另外,作为不会写程序的产品OR运营,只能通过第三方的工具或者平台来拿到数据了,或者向技术同学提需求。
技术才是第一生产力。如果会一些 SQL或者Python,获取的数据太要太精彩哇……
推荐书籍:做数据分析不得不看的书有哪些?
这个问答下面推荐的书,基本都是关于数据挖掘或者获取的。
五、分析、改进、维持
比如某游戏的玩家行业轨迹是这样的
于是分析的时候决定重点关注新用户的流失问题
流失的任务类型分析:
操作复杂
任务不平滑、不流畅
升级缓慢
有组队任务或者其他互动任务
然后就是不断的循环优化着。分析出问题,确认用户的需求,改进产品,进一步统计并维持提升结果。
分析的流程方法大概如此,比较好掌握,但是具体到工作当中,远非这几句话能解释当的,所以慢慢实践成长吧。
1.精益数据分析
2.转化:提升网站流量和转化率的技巧
3.数据分析 :企业的贤内助
4.网站数据分析:数据驱动的网站管理.优化和运营
5.人人都是网站分析师:从分析师的视角理解网站和解读数据
6.图解网站分析36大数据
网站数据是直接体现出网络营销的效果的数据。
网络营销的效果是需要网站数据体现出来的。
如果没有网站的数据统计很难对网络营销的成果作出量化,没有量化的数据统计,就不能对网络营销的效果有一个整体的分析,只有有了一个系统的分析才会有一个良好的 网络营销效果。
康那里士数字营销,长期从事网络营销策划与推广工作。
简单的统计代码还是跟踪流量来源……或者根据网站运营目的,达到某一特定需求进行有效分析。早期的网站建设和运营,在数据很少的时候,网站更注重流量和渠道,而网站运营相对成熟的时候,数据分析更应该偏向于网站功能性发展方向,比如一家企业营销型网站,对用户购买率特别敏感,那么数据分析就应该以此为核心,进行分析;而对于展示型网站来说,对于用户留存率特别感兴趣,数据分析依据就是兴趣,如果是一个靠广告获得收益的网站,如何诱导用户点击广告。
你想要实现什么目的,数据分析都可以起到辅助支持决策的作用
从用户方面入手分析包括以下几点:(微问数据)
1、包括用户增长统计和用户属性统计。
2、用户增长统计,是按日统计,有4个维度:
3、新关注、取消关注、净增关注、累积关注。
挺专业的,站长必备啊~~也就外出用手机关心一下网站流量,要不能在电脑上网,直接后网页GA,还辛辛苦苦弄3G看多麻烦。
这个问题问的比较广泛,你需要的是。如何去了解自己的店铺的一些数据,然后根据数据结合,改变店铺的整个布吉。
1
行业数据
行业数据对于一个APP来说,至关重要。了解行业数据,可以知道自己的APP在整个行业的水平,可以从新增用户、活跃用户、启动次数、使用时长等多个维度去对比自己产品与行业平均水平的差异以及自己产品的对应的指标在整个行业的排名,从而知道自己产品的不足之处。这种纵向的对比,会让自己的产品定位、发展方向更加清晰。
2
评估渠道效果
在国内,获取用户的渠道是非常多的,如微博、微信、运营商商店、操作系统商店、应用商店、手机厂商预装、CPA广告、交叉推广、限时免费等等。看一个APP的数据,首先要知道用户从哪里来,哪里的用户质量最高,这样开发者就会面临一个选择和评估渠道的难问题。但是通过统计分析工具,开发者可以从多个维度的数据来对比不同渠道的效果,比如从新增用户、活跃用户、次日留存率、单次使用时长等角度对比不同来源的用户,这样就可以根据数据找到最适合自身的渠道,从而获得最好的推广效果。
3
用户分析
产品吸引到用户下载和使用之后,首先要知道的就是用户是谁。所以,我们需要详尽地了解到用户的设备终端类型、网络及运营商、地域的分布特征。这些数据可以帮助了解用户的属性,在产品改进以及产品推广中,就可以充分利用这些数据制定精准的策略。
4
用户行为分析
在关注完用户的属性后,我们还要高度关注用户在应用内的行为,因为这些行为最终决定着产品所能够带来的价值。开发者可以通过设置自定义事件以及漏斗来关注应用内每一步的转化率,以及转化率对收入水平的影响。通过分析事件和漏斗数据,可以针对性的优化转化率低的步骤,切实提高整体转化水平。
5
产品受欢迎程度
在了解了用户的行为之后,我们应该看一下自己的产品是否足够受欢迎,这是一个应用保持生命力的根本。开发者可以从留存用户、用户参与度(使用时长、使用频率、访问页面、使用间隔)等维度评价用户粘度。进行数据对比分析的时候,要充分利用时间控件和渠道控件,可以对比不同时段不同渠道的用户粘度,了解运营推广手段对不同渠道的效果。
『陆』 在网络时代,如何能做到:既能全面收集客户信息,同时又能不侵犯客户隐私
1、尽量利用动态的诸如消费数据,少用只含有联系电话等静态数据。尽量利用根据消费数据进行分析、挖掘后产生的数据,将客户数据抽象作为群体、而不是落实到个人。
2、在掌握客户资料的情况下,与单个客户接触时,要有充分的理由,选择合适的事情、时间及客户喜欢的交流方式与客户接触。
3、在与客户交流时,尽量不要透露你的公司已经对客户的资料了如指掌。
4、采用一定的技术手段,确保客户数据的安全。要非常重视客户数据保密。
5、最后最基本的原则还是:在利用客户数据与客户接触时,一定要掌握交流技巧及服务艺术,“不着痕迹”才是市场营销的最高境界。
(6)如何利用网络技术从网站上下载数据扩展阅读:
获取信息的常见方式:
1、观察法:通过开会、深入现场、参加生产和经营、实地采样、进行现场观察并准确记录(包括测绘、录音、录像、拍照、笔录等)调研情况。
2、实验法:通过实验室实验、现场实验、计算机模拟实验、计算机网络环境下人机结合实验等过程获取信息或结论。
3、互联网信息收集法:通过计算机网络发布、传递和存储的各种信息。
4、查阅资料法:报纸、行业网站、文献、杂志、广播电视等传媒专访。
5、调查法:包括拜访调查法、电话采访法、问卷调查法。
6、检索方法。
7、索取方法。
『柒』 如何利用网络跟踪别人用什么网站
如何利用网络跟踪别人用什么网站
回答:有六种方法可以跟踪网站,其中包括:
1、Ip 地址:当我们连接到互联网时,它是我们设备的唯一地址。此地址与我们家或办公室中的其他联网设备共享。使用它,网站可以确定我们的大致地理位置。 IP 地址可以更改,因此很难通过长时间使用 IP 地址来跟踪特定用户。通过IP地址网站无法追踪用户的定位,但可以轻松追踪所在地区或城市。该程序基本上通过垃圾广告起作用。
2、HTTP Referrer:每当我们点击浏览器中的任何链接时,它都会加载链接到它的网页。网站将被打开,内部信息如IP 地址、位置、网络浏览器、机器类型等将提供给链接的网站。这称为HTTP 引荐来源网址。如果您单击网页外的链接,则该网页将获取有关您的信息。假设您单击“如何跟踪”链接(网页外部),则该链接将看到您来自何处,这称为 HTTP 引用标头。
一个网页可以包含一个跟踪脚本,它会告诉广告商您现在正在寻找哪个页面。
Web bug 是这里最无法追踪的程序,它们非常小,包含在图像中,用于邮件中,假设您打开包含图像的邮件,然后广告商可以追踪您。
3、Cookie 和跟踪脚本: Cookie 是您计算机上的小型文本文件,用于存储与您的在线习惯相关的一小段信息。 Cookie 还可以识别您的身份并跟踪您在网站上的活动。跟踪脚本发送有关您当时正在查看的页面的信息。
Cookies通常有两种类型:
第一方 cookie:这些 cookie 存储我们自己的登录 ID、密码、自动填充信息等,用于经常访问的网站。
第三方 cookie:这些 cookie 存储我们的浏览数据,并根据我们的兴趣使用这些 cookie 在我们的网页上放置广告。这有时会导致我们的网页上出现许多不需要的广告。
4、超级 Cookie:这些也是 cookie(如evercookie ),但具有持久性。它们将数据存储在多个位置(Flash cookie、Silver light 存储和 HTML 5 本地存储等)。如果您删除其中的一部分,该信息将从其他位置重新填充。假设您从浏览器中清除了 cookie,但在 Flash cookie 中没有清除,那么浏览器将从 Flash cookie 中复制 cookie 并重新填充到您的浏览器中,不知何故超级 cookie 就像永远无法消失的 cookie。
supercookie 的目标是记住每个用户,如果您清除它将从其他存储中重新填充的所有 cookie。 supercookie 与备份计划一起使用。
5、用户代理:每次我们连接到一个网站时,我们的浏览器都会向该网站发送一个用户代理,该网站从我们这里收集浏览器类型、操作系统和重要数据等数据,广告商使用它们在我们的网页上定位我们喜欢的广告看到我们想看到的。
6、浏览器指纹:每个浏览器都是独一无二的,这会告诉网站您安装的字体、插件您在浏览器中使用的所有内容。如果您禁用 cookie 以阻止这些事情,那么这将是跟踪您的另一种方式,禁用选项将告诉网站您的信息。
『捌』 都在说爬虫,究竟什么是爬虫技术啊,爬虫技术能够达到什么效果
就是从别的网站获取对自己有用的数据
有些是不公开的,因此有可能是无法的
『玖』 什么是网络爬虫
1、网络爬虫就是为其提供信息来源的程序,网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常被称为网页追逐者),是一种按照一定的规则,自动的抓取万维网信息的程序或者脚本,已被广泛应用于互联网领域。
2、搜索引擎使用网络爬虫抓取Web网页、文档甚至图片、音频、视频等资源,通过相应的索引技术组织这些信息,提供给搜索用户进行查询。网络爬虫也为中小站点的推广提供了有效的途径。
网络爬虫另外一些不常使用的名字还有蚂蚁,自动索引,模拟程序或者蠕虫。随着网络的迅速发展,万维网成为大量信息的载体,如何有效地提取并利用这些信息成为一个巨大的挑战。
搜索引擎(Search Engine),例如传统的通用搜索引擎AltaVista,Yahoo!和Google等,作为一个辅助人们检索信息的工具成为用户访问万维网的入口和指南。但是,这些通用性搜索引擎也存在着一定的局限性,如:
(1) 不同领域、不同背景的用户往往具有不同的检索目的和需求,通用搜索引擎所返回的结果包含大量用户不关心的网页。
(2)通用搜索引擎的目标是尽可能大的网络覆盖率,有限的搜索引擎服务器资源与无限的网络数据资源之间的矛盾将进一步加深。
(3)万维网数据形式的丰富和网络技术的不断发展,图片、数据库、音频、视频多媒体等不同数据大量出现,通用搜索引擎往往对这些信息含量密集且具有一定结构的数据无能为力,不能很好地发现和获取。
(4)通用搜索引擎大多提供基于关键字的检索,难以支持根据语义信息提出的查询。
『拾』 如何获取并分析一个网站的相关信息
1,网站内部数据
网站内部数据是网站最容易获取到的数据,它们往往就存放在网站的文件系统或数据库中,也是与网站本身最为密切相关的数据,是网站分析最常见的数据来源,我们需要好好利用这部分数据。
服务器日志
网站分析不再局限于网页浏览的PV、UV,转化流失等,基于Events的分析将会越来越普遍,将会更多的关注用户在接受网站服务的整个流程的情况。
随着网站应用的不断扩张,以及前端技术的不断升华。网站日志不再局限于点击流的日志数据,如果你的网站提供上传下载、视频音乐、网页游戏等服务,那么很明显,你的网站服务器产生的绝不仅有用户浏览点击网页的日志,也不只有标准的apache日志格式日志,更多的W3C、JSON或自定义格式的输出日志也给网站分析提供了新的方向。
网站分析工具
通过网站分析工具获得数据是一个最为简便快捷的方式,通过网站分析工具获得的数据一般都已经经过特殊计算,较为规范,如PV、UV、Exit Rate、Bounce Rate等,再配上一些趋势图或比例图,通过细分、排序等方法让结果更为直观。
但通过网站分析工具得到数据也远不止这些,上面的这些数据也一样可以通过统计网站日志获得,但网站分析工具的优势在于其能通过一些嵌入页面的JS代码获得一些有趣的结果,如一些网站分析工具提供的点击热图,甚至鼠标移动轨迹图。这些分析结果往往对网站优化和用户行为分析更为有效。
数据库数据
对于一般的网站来说,存放于数据库中的数据可以大致分为3个部分:
网站用户信息,一般提供注册服务的网站都会将用户的注册账号和填写的基本信息存放在数据库里面;
网站应用或产品数据,就像电子商务的商品详细信息,如商品信息会包含商品名称、特征描述、产品属性等;
用户在应用服务或购买产品时产生的数据,最简单的例子就是电商网站的用户购买(购买单、报价单、询盘)数据——购买时间、购买的用户、购买的商品、购买数量、支付的金额等。
当然,这一部分数据的具体形式会根据网站的运营模式存在较大差异,一些业务范围很广,提供多样服务的网站其数据库中数据的组合会相当复杂。
其它
其它一切网站运营过程中产生的数据,有可能是用户创造,也有可能是网站内部创造,其中有一大部分我们可以称其为“线下数据”。
2,外部数据
网站分析除了可以从网站内部获取数据以外,通过互联网这个开放的环境,从网站外部获取一些数据可以让分析的结果更加全面。
互联网环境数据
可以去一些网络数据分析平台查一下互联网中顶级网站的访问量趋势。
竞争对手数据
时刻关注竞争对手的情况可以让你的网站不至于在竞争中落伍。除了一些网站数据查询平台以外,直接从竞争对手网站上获取数据也是另外一条有效的途径,也有网站会出于某些原因(信息透明、数据展示等)将自己的部分统计信息展现在网站上,看看那些数据对于掌握你的竞争对手的情况是否有帮助。
在获取上述几类数据的同时,也许我们还可以从其他方面获取一些更为丰富的数据。
合作伙伴数据
如果你有合作的网站或者你经营的是一个电子商务网站,也许你会有相关的产品提供商、物流供应商等合作伙伴,看看他们能为你提供些什么数据。
用户数据
如果你的网站已经小有名气,那么尝试在搜索引擎看看用户是怎么评价你的网站,或者通过SNS网站等看看用户正在上面发表什么关于你的网站的言论。
当然通过用户调研获取数据是另外一个不错的途径,通过网站上的调查问卷或者线下的用户回访,电话、IM调查,可用性实验测试等方式可以获取一些用户对网站的直观感受和真实评价,这些数据往往是十分有价值的,也是普通的网站分析工具所获取不到的。
在分析网站的外部数据的时候,需要注意的是不要过于相信数据,外部数据相比内部数据不确定性会比较高。网站内部数据即使也不准确,但我们至少能知道数据的误差大概会有多大,是什么原因造成了数据存在误差。而外部数据一般都是有其他网站或机构公布的,每个公司,无论是数据平台、咨询公司还是合作伙伴都可能会为了某些利益而使其公布的数据更加可信或更具一定的偏向性,所以我们在分析外部数据是需要更加严格的验证和深入的分析。而对于用户调研中获取的数据,我们一般会通过统计学的方法检验数据是否可以被接受,或者是否满足一定的置信区间,这是进行数据分析前必须完成的一步。