原创力文档- 1、本文档共36页，其中可免费阅读11页，需付费200金币后方可阅读剩余内容。
- 2、本文档内容版权归属内容提供方，所产生的收益全部归内容提供方所有。如果您对本文有版权争议，可选择认领，认领后既往收益都归您。
- 3、本文档由用户上传，本站不保证质量和数量令人满意，可能有诸多瑕疵，付费之前，请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形，可联系本站下载客服投诉处理。
- 4、文档侵权举报电话：400-050-0827(电话支持时间：9:00-18:30)。
查看更多
PAGE30
网络数据爬虫及信息抽取设计与实现
摘要：随着网络信息的膨胀，人们更大程度上越来越依靠搜索引擎。爬虫作为搜索引擎不可或缺一部分，但是随之而来的问题是一些和暴恐有关的信息也能被用户搜索，会造成不良的社会影响，也不利于公安机关对社会秩序的稳定。即使索引等相关工作做的很好很完美，而爬虫收录的大部分会包含一定的反动暴恐信息，那么用户体验也无从谈起。这样就需要根据抓取效果来调整爬虫的调度和抓取策略。那么怎样才能去除和暴恐有关的网络信息并提高爬虫抓取网页的质量和效果呢?这就是本文爬虫数据信息抽取与统计系统需要解决的问题。
关键词：信息抽取；Mysql数据库；网络爬虫
1引言
文档评论（0）