原创力文档- 1
- 0
- 约1.2万字
- 约 10页
- 2023-06-06 发布于四川
- 举报
本发明实施例公开了网络数据采集处理方法、装置和电子设备，该方法包括：获取目标网络数据；根据所述目标网络数据生成调度数据文件和调度控制文件，其中，所述调度数据文件用于存储需要采集的任务，所述调度数据文件中的每条记录包括数据长度和数据信息，所述调度控制文件用于控制所述调度数据文件，所述调度控制文件包括数据来源、优先等级和数据读取相关信息；通过所述调度控制文件控制将所述调度数据文件中的数据信息进行解析后存储在文件队列中。本发明网络数据采集存储效率高，资源利用率高。
(19)中华人民共和国国家知识产权局
(12)发明专利申请
(10)申请公布号 CN 112764908 A
(43)申请公布日 2021.05.07
(21)申请号 202110106093.6 G06F 16/906 (2019.01)
(22)申请日
文档评论（0）