1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 行业资料
  5. 国内专利

一种基于DAP平台的大数据处理方法及系统.pdfVIP

  • 7
  • 0
  • 约1.54万字
  • 约 13页
  • 2023-07-06 发布于四川
  • 举报

一种基于DAP平台的大数据处理方法及系统.pdf

    本发明公开一种基于DAP平台的大数据处理方法，包括以下步骤，对系统进行大数据处理配置；进行可视化作业建模，保存并输出大数据作业任务；对大数据作业任务进行作业调度管理并监控；将大数据作业任务发送到SPARK集群；进行作业解析与执行，并获取作业的状态和日志。本发明还提供一种基于DAP平台的大数据处理系统，不仅支持更多样的数据资源间的输入输出与转换，而且支持大批量并发大数据量的数据转换任务，有效地节省了中心服务器的资源，提高了大数据ETL作业的执行效率，减少了数据整合的时间，实现了各个异构的数据源之间

    (19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 113821560 A (43)申请公布日 2021.12.21 (21)申请号 202010562473.6 G06F 9/48 (2006.01)

    您可能关注的文档

    最近下载

    文档评论（0）

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >