微博信息抓取系统-（毕业论文设计）.docVIP

微博信息抓取系统 PAGE 第PAGE \* MERGEFORMAT0页 共26页 微博信息抓取系统 【摘要】针对微博中庞大的数据量和用户关系群，本文提出并实现了基于新浪开放平台与Oauth2.0的微博信息抓取系统。该系统主要实现的功能有：(1)微博大厅的滚动微博及其评论的抓取(2)微博用户的好友及其相互关系的抓取。通过线程池和数据库实现了微博信息的抓取和存储，并通过prefuse的API，图形化的显示出用户关系。从实际运行效果分析，该抓取系统能够满足各种SNS应用的内容填充，及网络用户社会网络关系分析。 【关键词】Oauth2.0；新浪开放平台；社会网络关系；prefuse 引言 研究背景及意义 随着移动互联网的发展，中国迎来了真正的微博时代。微博由于其内容简短，写作门槛低，发布渠道便捷化，多样化，同步化，使得信息生产趋于零时间。与其他信息交流模式不同，微博最大的特点在于技术上的便携性。2009年，3G牌照的发放标志着移动互联网时代的到来，移动手机和互联网这两种在中国发展最为迅速的媒介开始融合在一起，为微博的快速扩张做了技术上的准备，与传统博客相比，微博对用户能够产生很强粘性的原因，就在于其在技术上无可比拟的便携性。用户可以通过各种方式登陆微博，发表微博。尤其是手机和微博的绑定使得这以新媒介对微博用户的接近性满足了4A的元素，即Anything，anywhere，anyo