CN107341163-CN201610287261-数据同步方法及装置.pdfVIP

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 107341163 A (43)申请公布日 2017.11.10 (21)申请号 201610287261.5 (22)申请日 2016.05.03 (71)申请人 阿里巴巴集团控股有限公司 地址 英属开曼群岛大开曼资本大厦一座四 层847号邮箱 (72)发明人 丁明峰　 (74)专利代理机构 北京汉昊知识产权代理事务 所(普通合伙) 11370 代理人 朱海波 (51)Int.Cl. G06F 17/30(2006.01) 权利要求书3页 说明书16页 附图6页 (54)发明名称 数据同步方法及装置 (57)摘要 本发明提供了一种数据同步方法及装置，其 中的方法包括：获取已同步处理的第一数据集合 以及待同步处理的第二数据集合；根据主关键字 获取第一数据集合和第二数据集合中均存在且 未发生变化的指标；在判断出所述指标当前值无 变化持续时间达到与该指标对应的预设阈值的 情况下，将第二数据集合中该指标所在记录的相 应数据同步到目标数据库中。本发明提供的技术 方案完善了数据同步技术，提高了数据同步的可 靠性。 A 3 6 1 1 4 3 7 0 1 N C CN 107341163 A 权　利　要　求　书 1/3页 1.一种数据同步方法，其中，所述方法包括以下步骤： 获取已同步处理的第一数据集合以及待同步处理的第二数据集合； 根据主关键字获取第一数据集合和第二数据集合中均存在且未发生变化的指标； 在判断出所述指标当前值无变化持续时间达到与该指标对应的预设阈值的情况下，将 第二数据集合中该指标所在记录的相应数据同步到目标数据库中。 2.根据权利要求1所述的方法，其中，所述目标数据库为内存数据库，且所述指标包括： 基于一个维度或者多个维度对数据进行聚合统计而获得的计算结果。 3.根据权利要求1所述的方法，其中，在第一次对所述目标数据库进行数据同步的情况 下，获取的已同步处理的第一数据集合为空。 4.根据权利要求1所述的方法，其中，所述根据主关键字获取第一数据集合和第二数据 集合中均存在且未发生变化的指标的步骤包括： 根据主关键字将第一数据集合和第二数据集合全外连接； 根据全外连接获得的各条记录确定第一数据集合和第二数据集合中均存在且未发生 变化的指标。 5.根据权利要求1所述的方法，其中，所述根据主关键字获取第一数据集合和第二数据 集合中均存在且未发生变化的指标的步骤还包括： 针对第一数据集合和第二数据集合中均存在且未发生变化的指标，在第二数据集合中 针对所述指标设置无变化标记。 6.根据权利要求5所述的方法，其中，所述方法还包括： 针对第一数据集合和第二数据集合中均存在且未发生变化的指标，在判断出所述指标 在第一数据集合和第二数据集合中均设置有无变化标记的情况下，将第二数据集合中的所 述指标所在记录中的指标当前值无变化起始时间设置为第一数据集合中的所述指标所在 记录中的指标当前值无变化起始时间； 其中，第二数据集合中的所述指标所在记录中的指标当前值无变化起始时间的初始值 为计算出指标当前值的时间。 7.根据权利要求6所述的方法，其中，所述判断出所述指标在第一数据集合和第二数据 集合中均设置有无变化标记的步骤包括： 以第一数据集合中的设置有无变化标记的指标所在记录形成的第三数据集合为右/ 左，以第二数据集合中的设置有无变化标记的指标所在记录形成的第四数据集合为左/右， 根据主关键字执行左/右外连接