CN114116691B 数据导入校验方法、系统、装置及计算机可读介质 （浪潮软件股份有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN114116691B(45)授权公告日2025.07.01

(21)申请号202111288460.5

(22)申请日2021.11.02

(65)同一申请的已公布的文献号申请公布号CN114116691A

(43)申请公布日2022.03.01

(73)专利权人浪潮软件股份有限公司

地址271000山东省泰安市东岳大街527号

浪潮科技园

(72)发明人倪祥路

(74)专利代理机构济南信达专利事务所有限公

司37100专利代理师潘悦梅

(51)Int.CI.

GO6F16/215(2019.01)

GO6F16/22(2019.01)

GO6F16/25(2019.01)

(56)对比文件

CN109299074A,2019.02.01CN109635017A,2019.04.16审查员程金翠

权利要求书2页说明书9页附图2页

(54)发明名称

数据导入校验方法、系统、装置及计算机可读介质

(57)摘要

本发明公开了数据导入校验方法、系统、装置及计算机可读介质，属于数据入库技术领域，要解决的技术问题为如何实现数据导入的完整性校验，并提升数据的可靠性和系统可用性。S100、配置基本约束和关联约束；S200、基于基本约束和管理约束构建数据校验模型，在Es搜索引擎中建立与数据校验模型对应的物理索引，并同步生成与对应的excel模板文件；S300、将符合约束的excel数据保存至Es搜索引擎，将不符合约束的excel数据作为失败数据保存并提示检测失败原因；S400、将保存于Es搜索引擎中的excle数

CN114116691B据插入数据库，将失败数据进行excel导出并进行修正，对修正后识失败数据执行步骤

CN114116691B

输入数据集1

输入数据集1输入数据集2

模型文件

输出数据集1输出数据集2

建立模型输出模型

CN114116691B权利要求书1/2页

2

1.数据导入校验方法，其特征在于包括如下步骤：

S100、配置基本约束和关联约束，所述基本约束用于对单表中字段进行约束，所述关联约束与Es搜索引擎配合，用于基于关联表之间的表结构关系确定所述关联表在Es搜索引擎中的索引关系，并根据索引关系将表数据依序导入Es搜索引擎中；

S200、基于基本约束和关联约束构建数据校验模型，在Es搜索引擎中建立与所述数据校验模型对应的物理索引，并同步生成与所述数据校验模型对应的excel模板文件，所述数据校验模型能够导出excel文件并能够对excel文件保存导入使用，所述excel模板文件用于填写数据并导入对应的数据校验模型；

S300、将数据填写至excel模板文件，得到待检验excel文件，并将待检验excel文件导入对应的数据校验模型进行基本约束和关联约束校验，将待检验excel文件中符合约束的excel数据保存至Es搜索引擎，将待检验excel文件中不符合约束的excel数据作为失败数据保存并提示检测失败原因；

S400、将保存于Es搜索引擎中的excle数据插入数据库，将失败数据进行excel导出并进行修正，对修正后识失败数据执行步骤S300-步骤S400。

2.根据权利要求1所述的数据导入校验方法，其特征在于所述基本约束包括：

基础约束，所述基础约束用于对单表中单个字段进行约束，用于通过表结构分析，对需要导入的数据表中的字段的基础约束进行提取，包括非空约束、唯一约束、和主键约束；

内容约束，所述内容约束用于设置表中字段的内容格式，包括时间格式、数字格式、和数据范围。

3.根据权利要求1所述的数据导入校验方法，其特征在于基于POI程序通过如下步骤将待校验数据导入所述数据校验模型：

通过excel模板文件与数据校验模型之间的对应关系，为待检验excel文件匹配对应的数据校验模型；

对待校验excel文件的sheet页进行提取，以将待校验excel文件每个表进行单独分sheet页保存；

对excel数据进行分页提取，以保证快速高效的将excel数据导入到对应的数据校验模

型中。

4.根据权利要求1-3任一项所述的数据导入校验方法，其特征在于所述数据校验模型