一种数据实时同步方法.pdfVIP

  • 2
  • 0
  • 约7.85千字
  • 约 7页
  • 2023-06-09 发布于四川
  • 举报
本发明公开了一种数据实时同步方法,涉及大数据分析技术领域,该方法包括在业务系统做预处理过程,获取数据信息并最终存入Clickhouse节点中,预处理过程包括应用程序拉取数据,获取外部配置参数,同步mongodb集群条件、分页信息以及主键,该方法还包括应用程序依据mongodb集群条件查询拉取的数据,再根据分页信息去mongodb集群查询数据,拉取到最后一条数据时更新查询条件,更新后的数据作为下一个查询的条件,应用程序根据主键的排序,将查询获取的数据写入多个Clickhouse‑bu

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 112905594 A (43)申请公布日 2021.06.04 (21)申请号 202110245191.8 (22)申请日 2021.03.05 (71)申请人 银盛支付服务股份有限公司

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档