项目5京东商品评价数据采集大数据大智慧大未来78课件.pptxVIP

大数据，大智慧，大未来项目5京东商品评价数据采集教师：谢丽萍

项目小结本项目通过对京东商城某一款商品的评价数据进行搜索，将搜索结果的主要信息（评论者昵称、评论内容、评论时间等）解析获取出来，保存到本地Excel文件。

项目小结为了形成良好的代码规范，希望同学们能将这个程序进行整理，比如可以分成以下几部分：第一部分：导入库，将程序实现需要的各种库均在此导入；第二部分：打开网站获取数据，主要是使用DrissionPage打开目标网站获取网页数据；

项目小结第三部分：获取单页评价数据，根据网页结构，选择合适的网页解析技术提取需要的数据。第四部分：批量获取数据，一般需要爬取的数据量都比较大，以分页形式展示，因此，需要通过遍历循环批量获取，此处一般需要借助time库进行反爬虫操作；第五部分：保存数据，根据项目需要，选择合适的数据类型保存数据，并保存到本地文件（数据库）。

作业理论作业5理论提交项目报告5文件命名：【班级十位学号姓名】项目5京东商品评价数据采集.docx实操