京东数据仓库海量数据交换工具.pdf

京东大数据分析与创新应用 邢志峰 目录 CONTENTS 一 电商面临的大数据挑战 二 京东大数据分析的实践 • 用户画像 • 京东慧眼 三 大数据创新的商业价值 • 用户的生活圈 • 舆情深度挖掘 四大数据看未来电商发展 电商面临的大数据挑战 商业思维面临的挑战 中国电子商务市 场依然在快速增 长，“红利”时 代还在延续 • 电商的人员构成（传统+互联网） • 电商的组织架构（业务主导 VS 数据支持） • 电商的商业目标（GMV VS Data-Driven ） 商业智能面临的挑战 传统BI 大数据时代的BI • 结构化数据 • 非结构化数据+结构化数据 • 关系型数据库 • 集群 • 数据规模一般TB级 • 数据规模从数十TB到PB级 • 集中式，数据向计算靠近 • 分布式，计算向数据靠近 • 批处理为主 • 支持流式计算 • 离线计算 • 实时分析+离线计算 • 报表展示 • 智能决策 • 统计分析 • 自动化分析 • 使用算法 • 深度应用算法 • 看数据 • 解读数据 京东大数据分析的实践 大数据分析/挖掘的方向 Analytic Visualizations  可视化分析  数据挖掘算法  预测性分析能力  语义引擎  数据质量和数据管理  数据来源多样化 Semantic Engines 算法实践 用户画像 性别 婚否 收入 基本 年龄 活跃程度 属性 教育程度 购物类型 购买 能力 星座 评价关注程度 颜色偏好 腰围 行为 身高 特征 体型 品牌偏好