《大数据挖掘与统计机器学习》教学课件—04案例分析.pptxVIP

第10章、大数据案例分析;2;（2）单机实现 描述性分析：用户记录的有效情况 ;APP使用情况预测分析 因变量：最后一周是否会使用第i类APP（分类问题）及使用强度（回归问题） 自变量：前23天的使用情况 ;模型：随机森林;用户行为聚类分析 用户APP使用差异的K均值聚类 双向聚类;RFM聚类 Recency：最近一次消费 Frequency：消费频率 Monetary：消费金额;;推荐系统;（3）分布式实现 数据预处理与描述统计 基于Spark的模型分析 分类、回归；聚类；推荐系统;2. 美国航空数据案例分析 （1）数据简介 美国境内1988-2008年各机场航班起降记录：表10-16 ;12;机场信息：表10-17；航空公司信息：表10-18 ;天气数据：表10-19 ;;（2）单机实现 基于Mysql的数据预处理与描述分析;洛杉矶到波士顿航线的延误分析;机场聚类分析;19;最短路径;（3）分布式实现 基于Hive的数据预处理 2000-2008年全部航班的起飞延误 机场聚类 用Spark建立分类模型 2000-2008年全部航班的起飞延误 随机森林;3. 美国纽约公共自行车数据案例分析 （1）数据简介 2013年7月1日至2016年8月31日共38个月（1158天）的交易流水数据;天气数据： ;（2）单机实现 描述统计分析与可视化展现;节假日、周末和工作日自行车使用情况;不同天气;每个月份各站点自行车使用量动态气泡图;网络分析、站点地图;自行车角度的分析 1158天内共有11487辆自行车 ;单个站点借车量预测分析;（3）分布式实现 基于Hive的数据预处理 用Spark建立预测模型;谢谢！ 请多指正！