网络爬虫的分析与实现.docx

PAGE2

网络爬虫的分析与实现

[摘要]时代进步与互联网技术迭代相叠加，使得人类社会与互联网的关系更加紧密且无法分割，在很多领域，由于互联网的介入我们的工作效率有了很大的提升。在对互联网技术应用的层面，通过互联网来寻找我们所需要的知识与信息是很重要的一个方向。为了获取更加精准且有效的信息，我们发明网络爬虫这一新兴事物，作为一种生产力工具,网络爬虫能够服从我们编写的程序指令搜索并获取互联网中的信息与数据以供我们使用。网络爬虫的价值本质就是获取数据的价值，数据的价值越高,爬虫的价值相应也会越高。本文将分析网络爬虫的爬行策略、实现过程以及在实际设计过程的一些具体思路。

[关键