基于云计算的电子政务公共平台顶层设计数据管理概述.pptVIP

（6）数据集成服务技术设计 数据集成服务设计，应提供面向多租户的ETL服务，即数据抽取（Extraction）、数据转换（Transformation）、数据加载（Loading）服务，同时提供用户自主使用的ETL开发配置和监控管理服务，帮助用户将批量异构的数据集成到统一的存储管理系统中，以便完成进一步的数据挖掘和分析。 数据集成服务 技术设计 * 数据集成服务技术主要内容 * 数据抽 取服务 数据转 换服务 数据加载服务 ETL开发配置服务 ETL监控管理服务 对可支持常见关系型数据库、非关系型数据库、文件等不同类型的数据源的数据抽取，必须支持主流国产数据库。 支持全量抽取、增量抽取、基于日志的抽取等抽取模式。 具备扩展能力，可以非关系数据库的抽取。 （7）数据处理服务技术设计 主要指为满足电子政务应用需求而提供的对数据的多种技术处理手段。电子政务中常用的有：数据分析服务和数据展现服务等。 数据处理服务 技术设计 * 数据处理服务技术主要内容 公共平台应根据所管理数据的规模和实际业务需求提供大数据特征的数据分析和预测分析服务： （1）数据分析服务 * 具有良好的扩展性、容错性和大规模并行处理特征，满足电子政务的智能性分析预测的需求； 应支持海量数据挖掘，满足政府部门单位TB、PB级数据分析需要。 应支持业界流行的大数据存储、分布式计算框架，灵活