大数据开发平台.pdf

2013.6.6 数据交换平台 CDO - 强琦（花名：和仲） BigData Dev@Alibaba 应用 • 大数据开发平台 • 背景 • 大纲 外部 � 业务线全覆盖 � 3P月增数据 � 80P结构化数据总量 � 数百万表 � 数据规模 • 背景 背景 能力 �找不到-数据管理 �用不起-计算能力 �用不了-数据质量 关系 empowerer � �网状-星型 �数据市场-共享共建 方式 �平台-落地 �封闭-开放体系 背景.能力 • 数据管理-找得到 �元数据，数据地图 �质量体系-血缘 �数据探索 • 大数据处理平台-用得起，用得好 �大规模批量计算系统 �流计算服务化平台 �数据同步中心 �实时数据中心 �在线kv存储服务 背景.能力 • 大数据处理平台 �调度服务 �即时计算服务 �监控，计量，审计，安全服务 �开发者门户IDE �算法平台 …… � • 用不了-数据质量 �DQC �血缘 … � 背景.关系 • Empowerer �赋予别人能力 �易用性 �让大家充分来挖掘大数据价值 • 星型 �统一中间层ODS �通用数据层 �避免重复建设(数据质量) �数据做乘法 • 数据市场 �质量体系 �市场机制 �应用市场 背景.方式 • 落地 �以业务落地为打造平台的标准 �开放体系 • 组件API服务(介于saas, paas间) • 接入标准(元数据，安全，计量，血缘，授权) • open 数据交换平台.Alibaba Map C C 阿里 阿里 N N 金融 淘宝 天猫 一淘 金融 淘宝 天猫 一淘 云 云 Z