原创力文档- 1、本文档内容版权归属内容提供方，所产生的收益全部归内容提供方所有。如果您对本文有版权争议，可选择认领，认领后既往收益都归您。。
- 2、本文档由用户上传，本站不保证质量和数量令人满意，可能有诸多瑕疵，付费之前，请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形，可联系本站下载客服投诉处理。
- 3、文档侵权举报电话：400-050-0827(电话支持时间：9:00-18:30)。
查看更多
PAGE1
分布式网络爬虫的功能需求分析
1绪论
1.1课题研究背景和意义
互联网技术正在迅速发展，大数据时代就在我们眼前，数量庞大的数据被越来越多的用户产生，互联网的规模以每半年就增加一倍扩大，海量的网络数据蕴藏在互联网系统中。这些数据具有以下特点：
（1）海量性。目前，我国的网民正在逐渐增多，无论是青少年，还是成年人，上网的比例越来越大，我国的网络覆盖面积也在逐步增加，从城市到农村，几乎家家户户都在用宽带。随着5G时代的到来，5G手机的出现，中国网民数量的增加，越来越多的数据被产生出来，如双十一的购物订单信息，包含客户的住址，电话，订单号，物品信息等。现在海量的数据正向我们
文档评论（0）