基于用户画像的大数据挖掘实践.pptxVIP

2014中华架构师大会基于用户画像的大数据挖掘实践 杨步涛2014年11月纲要 沃商店定位2 沃商店大数据体系架构3用户画像建设4个性化推荐5广告6 用户画像的其他应用实例沃商店定位内容分发平台游戏运营平台能力开放平台2013年中国手机应用分发总量快速上升，其中应用商店的分发量占比超过80%；TOP10渠道占总分发量的90%。2013年中国手机游戏市场近100亿元，2014年预计将达到180亿元。 多款优质手游月流水超过5000万元。运营商通信账户SDK支持APP应用内付费，提升付费转换率，从不足5%提升至20%以上。话费支付的便捷优势机遇期短暂仅1-2年，移动互联网支付的替代转瞬即至。沃商店定位机器学习算法库离线计算Zookeeper数据存储Storm实时计算离线实时沃商店大数据架构体系能力开放应用用户画像/分群流量经分PUSH个性化推荐广告特征工程建模数据可视化监控管理调度HIVE分类/回归降维主题数据处理存储层GangliaSparkMR聚类预测优化HDFSHbase MysqlRedisNagiosOzzieFTPSqoopKafkaFumeNG数据采集结构化非结构化Log Server站内CPGGSNBSSDM经分预测流量智能推荐广告PUSH自我学习特征工程—用户画像数据开放沃商店、CP基本维度性别、年龄、地域、终端、网络、渠道、机型…语义挖掘行为标注引擎影音、生活、社交