数据同步处理方法、装置、设备及存储介质.pdfVIP

  • 2
  • 0
  • 约2.31万字
  • 约 19页
  • 2023-05-28 发布于四川
  • 举报

数据同步处理方法、装置、设备及存储介质.pdf

本发明涉及大数据技术领域,公开了一种数据同步处理方法、装置、设备及存储介质,用于提高数据转换和导入效率。数据同步处理方法包括:按照数据挖掘请求从预设分布式文件系统中批量读取多个表结构数据;按照结构化查询语言SQL语法规则分别对多个表结构数据依次进行数据清洗和语句拼接,得到多个SQL查询语句;连接目标关系型数据库,按照多个SQL查询语句进行数据查询操作,得到查询结果集;对查询结果集进行数据清洗和格式转换,得到多个分布式文件系统文件;将多个分布式文件系统文件分别导入至预设分布式文件系统中,得到更新结

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 112380180 A (43)申请公布日 2021.02.19 (21)申请号 202011282969.4 (22)申请日 2020.11.17 (71)申请人 平安

文档评论(0)

1亿VIP精品文档

相关文档