大数据技术应用实施方案建议.ppt

大数据技术应用实施方案建议 信息技术管理部 2013年6月 1 目录 我行新一代数据集成平台能力要求 业内大数据技术的特性及应用研究 我行大数据技术的应用策略 2 新一代管理分析类应用需求 3 运营与信息安全 运行日志存储与分析 安全日志存储与分析 新一代管理分析类应用对于大数据处理分析技术提出了高要求 新一代数据集成平台数据特点与挑战 4 Volume 数量大 数据内容丰富（账户信息、账户明细、流水信息等） 数据存储周期长（监管要求保存20年） PB级的海量数据 Variety 种类多 数据类型多样，包括结构化、半结构化、非结构化数据，如交易数据、日志数据、影像视频数据等等 Velocity 速度快 近实时数据处理（即席数据分析） 实时访问(如历史数据查询) 流式数据计算（如反欺诈） 大数据时代，技术面临着Volume、Variety、Velocity 3V的挑战 目录 我行新一代数据集成平台能力要求 业内大数据技术的特性及应用研究 技术特性研究 技术应用研究 我行大数据技术的应用策略 5 大数据技术一览图 6 大数据技术主要包含应用领域（如商务智能）、基础设施领域（结构化数据库技术、分析型数据技术等）和基础技术领域的各种相关技术。 重点调研的相关大数据存储技术产品调研 基于商用硬件的分布式数据库技术 HADOOP技术 对于大数据技术、产品的调研分两类进行，即关系型数据库与非关系