基于跨平台的舆情分析系统设计与实现.docx

PAGE

PAGEIV

基于跨平台的舆情分析系统设计与实现

摘要：随着网络时代的高速发展，人们可通过各大社交媒体了解新闻等信息，获取信息资讯的方式也越来越方便快捷。无论是时事新闻、社情民意、还是娱乐八卦新闻，通过基数庞大网民用户群进行的转发、评论、点赞等行为，让这些话题成为热点话题。而这些行为产生都将产生巨大的网络数据量。舆情分析系统则是通过海量的数据信息分析，过滤掉大量无意义以及重复的新闻，筛选出对用户有用信息。用户通过本系统可以及时了解当前热点新闻，节省用户时间。

本系统设计过程主要是通过python的API爬虫方式提取数据，并且利用pandas对数据进行清洗以及去重分析