大数据质量校验方法、装置、设备及存储介质.pdfVIP

  • 18
  • 0
  • 约2.09万字
  • 约 17页
  • 2023-08-23 发布于四川
  • 举报

大数据质量校验方法、装置、设备及存储介质.pdf

本发明涉及数据检测技术领域,并公开了一种大数据质量校验方法、装置、设备及存储介质,该方法包括:对待校验大数据所需的数据源进行数据构造,并基于数据构造后的大数据编排DAG任务;按照编排顺序依次调用airflow平台查询DAG任务的执行状态,并基于执行状态依次执行DAG任务,得到执行结果数据;基于预设校验规则对执行结果数据进行校验,得到校验结果数据;将校验结果数据进行可视化处理,得到质量校验报告并向用户展示。本发明基于数据构造后的大数据编排DAG任务得到执行结果数据,并基于预设校验规则对执行结果数据

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116627958 A (43)申请公布日 2023.08.22 (21)申请号 202310901493.5 (22)申请日 2023.07.21 (71)申请人 中邮消费金融有限公司 地址 51

文档评论(0)

1亿VIP精品文档

相关文档