AppCan EMM V3平台系统架构文档.docxVIP

AppCan EMM V3系统架构文档 正益无线（北京）科技有限公司 2015年2月  平台服务和逻辑架构说明 EMM平台基础服务说明如下： 服务名称 服务作用 EMMIN App接入认证，平台App接口服务 EMM EMM管理服务 PUSH 信息推送服务 MAS App后端业务系统对接（数据对接、协议转换）、Android推送服务运行环境 Ngnix Web服务、文件下载、MAS代理转发（可选） RabbitMQ 消息队列服务，完成各服务间通讯协调 Redis 推送消息缓存、MapReduce结果数据缓存；用户认证信息缓存、认证配置（Https证书PEM值、App、接口）缓存、后端业务系统Cookie数据缓存 Hadoop 应用基础信息同步、应用访问日志、设备上报信息、MapReduce处理 MySQL EMM管理服务数据库（MAM、MDM、MCM等） GlusterFS EMMIN、Ngnix多节点文件共享服务，EMM管理服务文件存储服务 支持负载均衡和容灾要求的平台典型逻辑架构可以用下图表示。 移动接入节点配置为2台服务器（Sever1、2），负责处理移动应用接入，分别部署EMM IN（移动接入）、MAS（移动后端业务接入、信息推送）和Ngnix（Web服务），并采用GlusterFS完成与EMM管理服务节点（Server5）间的文件共享访问。 后端数据支撑采用3台服务器（Sever3、4、5），完成平台数据存储；分别部署MySQL集群、Hadoop HBase分布式存储，以及Redis容灾集群和RabbitMQ容灾集群。 App接入请求通过位于DMZ区的F5分发请求到移动接入节点的EMMIN服务上，完成接入认证后响应对应服务接口请求，并将产生的数据请求分发到数据支撑节点上的MySQL、Redis和HBASE服务上，并通过RabbitMQ作任务协调。 信息推送上，管理员通过管理控制台发出信息推送后，由PUSH服务收集推送终端列表并拼装成推送任务，调用MAS推送服务推送给相应终端；推送信息被缓存到Redis服务器上，直至被成功推送到对应终端。MAS推送服务的实现，Android设备采用MQTT协议完成，iOS推送直接发送给苹果推送服务器。 EMM平台服务器数据流转大概分以下几种情况： 应用的启动上报 通过EMM接入服务将App启动数据、上报参数存到hbase，并同步存储到Mysql。 业务数据的调用（包括登录） 客户端调用EMM接入提供的接口获取应用相关数据，接口直接从Mysql中查询业务数据 静态文件访问 通过EMM接入返回的静态文件地址直接请求到静态文件服务器 4. 通过EMM管理控制台录入的数据直接存储到Mysql，并将基本数据同步到hbase 平台负载均衡和容灾集群支持上，移动接入节点中的EMMIN服务运行在Tomcat集群上，采用Tomcat的会话共享方式完成各EMMIN服务各节点的Session同步。MAS服务本身为无状态服务，MAS节点间的会话通过后端的Redis数据缓存方式保存。Nginx服务为完全对等节点，提供静态文件访问功能，没有会话共享的需求。 数据支撑节点的集群架构，MySQL采用Ndb Cluster方式，HBase采用Hadoop多副本技术完成数据容灾；Redis采用官方Sentinel方案以keepalived方式完成主从容灾集群配置，RabbitMQ采用HAProxy实现主从失效切换。 由于除了EMMIN服务外，Redis、RabbitMQ等其他服务均采用Active-Stanby方式架构容灾集群，因此不存在服务对等节点间的会话同步问题。 部署架构 对应于前面5节点平台逻辑架构的AppCan EMM服务器典型部署架构如下图所示： 其中，由F5负责App端应用请求处理负载的分发。 节点部署说明 各节点用途、位置、服务描述如下： 节点名 部署组件 位置 用途 Server1 EMMIN MAS Nginx Tomcat 内网 负责处理移动应用接入、信息推送服务、后端业务对接，完成EMM接入服务和后端数据分发 Server2 EMMIN MAS Nginx Tomcat 内网 负责处理移动应用接入、信息推送服务、后端业务对接，完成EMM接入服务和后端数据分发 Server3 RabbitMQ Redis Hadoop Hbase Zookeeper MySQL 内网 数据存储支撑服务，消息总线 Server4 RabbitMQ Redis Hadoop Hbase Zookeeper MySQL 内网 数据存储支撑服务，消息总线 Server5 Redis Hadoop Hbase Zookeeper MySQL Emm管理 Tomcat 内网 数据存储支撑服务、消息总线、EMM管理服务