大数据计算分析系统.pdfVIP

  • 1
  • 0
  • 约1.64万字
  • 约 13页
  • 2023-09-10 发布于四川
  • 举报
本发明公开了一种大数据计算分析系统,包括:数据采集模块、存储清洗模块、数据分析模块和资源调度模块;数据采集模块用于将原始数据实时采集至预设关系型数据库中,并将预设关系型数据库中的新增数据发送至存储清洗模块;存储清洗模块,包括数据存储子模块和数据清洗子模块;数据分析模块,用于采用计算引擎Spark,根据目标业务需求对数据存储子模块中存储的清洗后的数据进行分析处理,输出分析处理结果;资源调度模块,用于分别为数据采集模块、存储清洗模块、数据分析模块分配工作时所需的资源。本发明实施例的大数据计算分析系统

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116719806 A (43)申请公布日 2023.09.08 (21)申请号 202311010078.7 (22)申请日 2023.08.11 (71)申请人 尚特杰电力科技有

文档评论(0)

1亿VIP精品文档

相关文档