logo

您所在位置网站首页 > 海量文档  > 教育文化 > 教育文化

贵州省大数据清洗加工规范.PDF 27页

本文档一共被下载: ,您可全文免费在线阅读后下载本文档。

  • 支付并下载
  • 收藏该文档
  • 百度一下本文档
  • 修改文档简介
全屏预览

下载提示

1.本站不保证该用户上传的文档完整性,不预览、不比对内容而直接下载产生的反悔问题本站不予受理。
2.该文档所得收入(下载+内容+预览三)归上传者、原创者。
3.登录后可充值,立即自动返金币,充值渠道很便利
贵州省大数据清洗加工规范 Big Data C leaning Specifications for Guizhou 贵 州 省 大 数 据 发 展 管 理 局 2017 年 6 月 目 次 前 言 1 1 范围 2 2 规范性引用文件 2 3 术语和定义 3 4 数据清洗流程与原则 5 4.1 政务数据来源 5 4.2 数据质量问题与数据清洗的关系 5 4.3 数据清洗流程 6 4.4 数据清洗加工原则 8 4.4.1 方法一致性 8 4.4.2 数据可信性 8 4.4.3 数据可用性 8 5 数据清洗流程控制 8 5.1 数据预处理 10 5.1.1 数据抽取 10 5.1.2 数据过滤 10 5.1.3 数据转换 10 5.1.4 数据加载 11 5.2 数据清洗 11 5.2.1 数据清洗规则 11 5.2.2 脏数据处理 12 5.3 非需求数据处理 17 6 数据清洗质量控制 18 6.1 数据清洗质量评估要求 18 6.2 数据清洗质量评估指标 18 7 数据清洗过程管理 19 I 7.1 数据清洗角色定义 19 7.2 提供者管理要求 20 7.3 管理者管理要求 20 7.4 数据审核管理要求 20 7.5 数据更新总体原则 21 7.6 数据矫正处理要求 21 7.7 数据清洗服务管理要求 21 附表 23 业务数据转换规则示例表 23 II 前 言 本规范按照 GB/T 1.1-2009 《标准化工作导则 第 1 部分:标准 的结构和编写》给出的规则起草。 本规范由贵州省大数据发展管理局出并归口。 本规范起草单位:贵州中软云上数据技术服务有限公司、云上贵 州大数据产业发展有限公司、

发表评论

请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码: 点击我更换图片

“原创力文档”前称为“文档投稿赚钱网”,本站为“文档C2C交易模式”,即用户上传的文档直接卖给(下载)用户,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有【成交的100%(原创)】。原创力文档是网络服务平台方,若您的权利被侵害,侵权客服QQ:3005833200 电话:19940600175 欢迎举报,上传者QQ群:784321556