基于P2P网络、社交网络的Web 2.0应用的采集与分析

发布时间：2021-02-24 00:35

　　Web 2.0的出现和兴起,是一次从核心内容到外部应用的革命,彻底地改变了用户使用互联网的模式。P2P网络和社交网络作为Web 2.0的典型应用,发挥着越来越关键的作用,包含的信息和数据也越来越重要。其中,基于P2P网络的文件共享、流媒体及搜索引擎占据了绝大多数的互联网流量,而使用各种社交网络则逐渐成为互联网用户最主要的上网习惯。对P2P网络和社交网络进行数据采集是分析网络性能、优化用户体验、强化网络安全的一项基础性工作。目前针对P2P网络和社交网络的数据采集都是以主动采集为主,即从网络的某些点开始主动爬取相关信息。主动采集具有采集目的性强、数据解析能力强、采集环境要求低的优点。然而,一方面,由于主动采集必须逐个遍历节点,随着网络的增长,主动采集在时效性、信息有效性方面受到一定制约;另一方面,由主动采集的采集方式决定了无法获得用户登陆等实时行为信息。针对主动采集的缺点,本文提出了针对P2P网络和社交网络的被动采集方式。基于网络监听原理、数据包拼包和协议还原技术,使用Libpcap库作为采集接口,分别针对P2P网络中的BT协议和社交网络中的Twitter,设计实现了被动采集系统,并部署实... 

【文章来源】：北京邮电大学北京市 211工程院校 教育部直属院校

【文章页数】：67 页

【学位级别】：硕士

【部分图文】：

图１－１?Ｗｅｂ?２．?０主要特征及应用??１）用户参与到网站内容制造而不仅仅浏览网站：与Ｗｅｂ?１．０网站信息只是由??

＇＇＇＇＇Ｙ＇Ｐｒｎ、???Ａ?。??／?ｐｅｅｒ?ｊ??图１－２?ＢＴ协议的工作原理??首先，拥有共享文件的客户端上传种子文件，即．ｔｏｒｒｅｎｔ文件到服务器。种子??文件很小，通常只有几十ＫＢ，然而种子文件中包含着下载共享文件所需的Ｔｒａｃｋｅｒ??服务器地址和相应的一些配置信息。此外，共享文件被虚拟分成若千大小相等的??２ＫＢ的整数次方块，块的索引信息和哈希验证码同样保存在．ｔｏｒｒｅｎｔ文件中。因??此，．ｔｏｒｒｅｎｔ文件也下载中同样发挥着文件索引的作用。??随后，下载者Ｐｅｅｒ得到．ｔｏｒｒｅｎｔ文件后，Ｐｅｅｒ对应的ＢＴ客户端通过解析．ｔｏｒｒｅｎｔ??文件得到下载文件Ｔｒａｃｋｅｒ服务器的地址。通过连接Ｔｒａｃｋｅｒ服务器，从Ｔｒａｃｋｅｒ服??务器获得其他下载者或者拥有者的ＩＰ之后与其他下载者建立连接。根据．ｔｏｒｒｅｎｔ??文件

全球有超过１２亿的用户每月至少一次使用社交网络网站。ｅＭａｒｋｅｔｅｉ？预计，??到２０１４年，全球将有超过１．８亿用户每月至少使用一次社交网络．同时，预计２０１１??年至２０１４年社交网络用户数量将保持两位数增长［７］。如图１－４所示：??２０〗】－２０１４年全球社交网络用户数重??３５???１９．＾????２Ｓ????二；?１Ｂ．５??１６－６?ｒ—■?＂Ｉ??１４，３?｜?■?￣—１??ｉ?４?ｔ２??７?，??？??ｏ?￣Ｌ——一——ｊ?Ｌ—???—－Ｊ?ｌｉ－￣＾?—??２０１）?２０１２ｅ?２０１３ｅ?２０１４＆??［＝３社交网络用户笑：ｍ?（忆）?－＾一墦长卒（％）??图１－４?社交网络用户数量预测??社交网络用户急剧增长，得益于社交网络自身信


本文编号：3048492