大数据采集与预处理技术（微课版）课件 1.7表情图像数据采集网站分析.pptx

大数据采集与预处理技术

**;项目一人脸图像数据采集和预处理;任务二人脸图像数据采集程序;1）分析爬取网站

爬取人脸数据是繁琐复杂的，要找合适的目标数据，并对数据进行分析，本例选取下面网址的照片数据。

/photos/

2）获取所有的要爬取图像的页面列表。

该网站内容已经按名字首字母的分页。如下网页表示名字是以A开头的用户照片：

/photos/people-A.html;3)对/photos/people-A.html网页内容分析，人物名称保存在如下页面内容:

获取相应页面内容，并解析。注意各子路径和姓名的获取方式。

url=/photos/people-