金融行业科技部数据工程师数据清洗处理手册.docxVIP

金融行业科技部数据工程师数据清洗处理手册

第1章数据治理基础规范

1.1数据质量定义与验收标准

数据质量是衡量数据资产价值的核心指标，它定义了数据在准确性、完整性、一致性、及时性等方面的表现水平。在金融科技部数据清洗处理中，数据质量直接决定信贷审批、风控模型等关键业务的决策可靠性。

数据完整性是指数据记录在表中所有必需字段的值都不为空，且符合预期的格式要求。例如，在录入客户信息时，手机号、身份证号码等关键字段不能为空；在录入交易流水时，交易时间、交易金额等字段必须存在，缺失任何一项都将触发数据质量预警。数据准确性是指数据内容的真实反映，即数据值与客观事实或业务逻辑定义完全一致。