基于Spark的交互式数据探索与建模系统.pptx

;;大数据分析需要掌握这么多装备…;为什么不能有这样的分析工具？;技术选型：Spark;Spark2.0的性能;DI：交互式数据探索框架;DI概览;数据转换;;文本分析;典型算子：特征词提取;信息熵定义;典型算子：词语语义距离分析Word2Vec;探索分析;典型算子1：多维分组统计;;;典型算子2：特征降维（列相关）;;典型算子3：离散自相关矩阵分析;应用：保险欺诈合谋分析;合谋关系分析可视化;车辆自相关分析;典型算子4：离散互相关矩阵分析;应用：从报案地点看合作欺诈关系;可疑车辆可视化;离散矩阵分析;典型算子5： 频繁项;数据建模;;数据可视化;无级投影的数据可视化;医疗数据（真实数据）;可视化示例;总结;开发状态和下一步计划