智慧景区客流量大数据平台建设综合解决方案 智慧景区大数据分析平台整体解决方案.ppt

Spark Hadoop / Impala 信令数据源 文件 非实时应用计算 原始信令历史存储 信令接口机 分钟级 信令数据 省经 数据仓库 应用数据 ETL 一天 用户信息 客户标签 文件 信令数据 应用数据 Spark Streaming 位置基础模型计算 Spark SQL 实时应用计算 一天 分钟级 用户位置 用户轨迹 用户位置 用户轨迹 系统整体架构数据处理流程图（二、开源Spark软件方案） 外部用户 前台展现 服务 开放 应用数据库 应用数据 挖掘统计数据 系统整体架构数据处理流程图（三、非流处理方案） Gbase 信令数据源 周期性景区用户数分析（15分钟级） 非实时景区内\间轨迹历史存储分析及挖掘 信令接口机 按周期性 （十五分钟） 外部用户 前台展现 服务 开放 应用数据库 十五分钟 省经 数据仓库 ETL 一天 用户信息 客户标签 原始信令历史存储 Hadoop 文件 应用数据 挖掘统计数据 ETL 小时、天 应用数据 文件ETL 景区基站信令过滤 备注：可选用商业软件如：IBMstreams，Oracle CEP，也可选用开源软件，各有利弊 方案对比 　 商业混搭软件方案 开源（Spark）方案 非流处理方案 开发难度 有开发经验 开发方式探索中 容易 系统性能 好 好，待测试 一般 系统稳定性 较好 待实际运行验证 一般 系统扩展性 好，但受制于商