分布式网络爬虫的设计与实现——分布式算法研究和系统架构设计---毕业论文.doc

本 科 毕 业 论 文 The Design and Implementation of Distributed Web Crawler ——Distributed Algorithm Research and System Architecture Design 姓 名： 学 号： 学　　院：软件学院 系：软件工程 专 业：软件工程 年 级： 指导教师：　 年 月摘　要 随着网络技术的发展，Web上的信息海量增加，人们对信息的需求也不断加大，使得专门负责Web