基于Go语言的网络爬虫框架的设计与实现.docxVIP

PAGE 基于Go语言的网络爬虫框架的设计与实现 摘要 近年来，计算机软硬件的飞速发展，互联网技术已经深刻地影响着人类生活的各方各面，成为生活中不可或缺的重要组成部分。互联网用户的爆炸式增长，互联网生态的急剧膨胀和发展，每天都会产生难以估计、体量庞大、种类繁多的数据。这些数据往往蕴藏着巨大的价值，对它们进行分析研究，可以从中挖掘出有价值的信息。利用这些信息建立对于决策支持的模型，有利于企业发现业务趋势，揭示规则，挖掘出之前无知的结果。因此，大数据已经成为大部分企业必争的战略高地。而这些庞杂的数据，以各种各样的形式存在于互联网中，如何低成本、高效率地从网上获取这些数据也成为一个重点课题。其