历史数据迁移方案设计V1.3.docVIP

历史数据迁移方案 1.历史数据迁移总体方案 1.1方案描述 方案：分两批或屡次迁移 假设历史数据量庞大，在上线当天的规定时间范围内无法迁移完成，那么可考虑进行分批迁移。 可设定历史数据迁移分为多批进行：迁移时以某个时间节点为基准，对数据进行划分，按照时间节点将影像案件划分成两个或多个时间段。比方迁移影像案件的最新修改时间在2021年1月1号~2021年12月31号内的影像数据，以2021年11月30号为时间点，将时间范围划分为两段，分成两批在两个不同时间进行迁移： 第一局部划分比拟多的数据：2021年1月1号~2021年11月30号 第二局部划分比拟少的数据：2021年12月1号~2021年12月31号 两个时间段，分两批进行迁移，第一次迁移大局部的数据，第二次在上线当天迁移少局部数据，节省上线当天数据迁移的时间，同时配合多线程进行同步迁移。 迁移步骤简述： 迁移机器申请和环境搭建。 迁移机器Web环境搭建，历史影像数据磁盘挂载等。 核心工程组将历史影像数据信息转换填充到影像迁移表。 双方检验填充到迁移表的数据是否正确。 启动迁移程序，开始迁移。 迁移数据验证和抽检。 迁移流程图： 1.2迁移后历史数据变更处理 对历史数据迁移后存在变更的数据处理方案： 比方迁移2021年1月1号~2021年12月31号，以2021年11月30号为时间点，将时间范围划分为两段： 第一局部划分比拟