《各平台数据采集及方法》课件——金融网站数据采集.pptxVIP

金融网站数据采集

金融网站的数据采集打开实例网址“东方财富网”，单击“排行”超链接进入基金排行页面，如图所示。采集全部开放基金排行表格内的所有内容，要求使用XPath轴方式进行翻页。

金融网站的数据采集新建自定义采集任务。单击“主页”界面中“自定义采集”下的“立即使用”按钮，新建自定义采集任务，然后在“网址”输入框中输入实训网址，单击“保存网址”按钮保存网址，如图所示。步骤1

金融网站的数据采集进入排行页面。在浏览页面中单击基金右侧的“排行”按钮，在“操作提示”面板中单击“点击该链接”选项进入排行页面，如图所示。步骤2

金融网站的数据采集步骤3：XPath轴翻页。（1）循环点击当前页数单击当前页面页数即第1页，在“操作提示”面板中单击“循环点击单个元素”选项，流程图中生成“循环翻页”模块。

金融网站的数据采集步骤3：XPath轴翻页。（2）修改循环XPath选择“循环翻页”模块，将循环方式设置为“单个元素”，修改XPath为“//LABEL[@class=cur]/following-sibling::label[1]”。

金融网站的数据采集步骤3：XPath轴翻页。（3）修改点击翻页Ajax超时选择“点击翻页”模块，由于系统生成为1秒，为防止1秒时间不够翻页，设置“Ajax超时”为3秒。

金融网站的数据采集循环提取数据。选中表格中整行数据，单击某单元格，在“操作提示”面板中单击“TR”选项即可选择整行数据，如上图所示。循环提取表格，再次进行上方的操作，选中第二行某单元格，单击“操作提示”面板中的“TR”选项，可见八爪鱼采集器选中所有行数据。单击“操作提示”面板中的“采集以下元素文本”选项，流程图中生“成循-环提取数据”模块，如下图所示。步骤4

金融网站的数据采集修改提取内容。选择“提取数据”模块后，单击需要提取的内容，在“操作提示”面板中选择“采集该元素的文本”选项，如图所示，提取所有字段。步骤5

金融网站的数据采集开始采集。单击界面上方的“开始采集”按钮，单击“启动本地采集”按钮开始采集。步骤6

金融网站的数据采集数据导出。数据采集完成后，单击“导出数据”按钮，选择导出方式，单击“确定”按钮，选择存放位置即可。步骤7

资料来源：[1]刘宝强,商务数据采集与处理.北京：人民邮电出版社,2019

谢谢观看Thanksforwatching