采用python语言对新浪微博的爬虫程序.pdf

网络爬虫技术是一种数据抓取技术，它能够依照你所制定的要求和规则去对互联网上URL进行采

集。这一技术目前已经在搜索引擎以及其它相关的网站设计中得到普遍地使用。利用网络爬虫，设计

者可结合自己的目标需求从海量的互联网信息中抓取目标，并将其中的有效信息数据进行存储，再通

过可视化分析达到想要实现的功能和分析结果。

本论文主要是在PyCharm开发环境下，采用python语言对新浪微博编写的一个爬虫程序。该爬虫

程序能够实现对微博网页上的热搜数据进行实时地抓取并将数据保存到CSV文件中，然后再对获取到

的数据进行可视化分析。整个过程需要用到Python中的众多