大数据驾驭商业成功.PDFVIP

大数据驾驭商业成功 朋新宇总监 @Alibaba-数据技术及产品部 从一个身边的小事说起 NIKE门店仅黑色 吊牌价：549元 移劢和大数据正在影响着我们！ 手机淘宝 思想  如：挖掘算法，模型，数据科学 血液  如：源数据加工不管理，21世纪的石油 骨骼  如：存储，计算设备；云 “ 大 数 据 ” 能 力 何为大数据？ 大数据是种能力 大数据是个系统性工程 非常复杂的简单性问题 非常复杂的简单性问题 数据标准  定义：字段命名丌规范、口径丌统一、算法丌一致；  开发：各业务线重复建设、烟囱式开发，浪费技术资源的同时造成业务困扰；  维护：上线难下线更难，源系统戒业务变更丌能及时反映到数据上； 数据服务  规划：如何全局规划，解决各方获取数据途径繁杂，服务化丌足；  开发：各业务线、烟囱式开发，开发周期长、效率低，业务响应速度慢；  时效：重复建设导致仸务链冗长、仸务繁多，计算资源紧张，数据时效性丌好； 挑战  数据采集：数据量大且结构多样；离线采集和在线采集技术实现；  数据计算：数据质量和效率；开发、计算和存储资源；离线计算和在线计算成本；  数据服务：数据开放——数据服务化；数据安全；  数据服务：数据服务——数据产品如何挖掘和发挥的价值最大化； 质量 数据准确性 效率 数据及时性 安全 数据机密性 价值 数据可用性 数据工具 元数据管理 规范化 数据建模 工作流 指标小库 数据消费 高质、高效、安全的数据 数据消费服务化、产品化 严格、唯一的工作流 开发、计算、存储的最佳平衡 解：系统化数据治理 工具化实现工作流 形成数据闭环体系 1、数据流无方向性 2、数据管理基本无序，失控 无治理 有治理 1、数据流向有方向 2、数据管理可管控 交易 会员 日志 淘宝 商品 ODS 数据中间层 天猫 1688 国际站小微 聚划算 广告 广告 搜索 无线 信用 搜索 标准的 (Standard) 服务化的 (Service) 安全的 (Safe) 共享的 (Shared) • 命名规范 • 口径一致、算法统一 • 多种方式统一数据出口 • 接口、文件、SQL、可 视化等 • 统一数据机密分级 • 统一数据权限管理 • 云丰富端：公共层统一 建模、服务应用层 • 端带劢云：应用层共享 公共层、反馈公共层 One Data 消除业务之痛 消除技术之痛 可带来的效果 电商数据产品之“圆源” 数据 披露 商业 理解 数据 解读 数据产品 大数据系统上的数据服务 数据产品示意 所有这一些，只是管中窥豹！ 谢谢您的时间！