移动性能监控系统架构设计.pptx

移动性能监控系统架构Front-end 采集 Native App Use Object C / Java? App Initialize? Download? Update? Traffic? ……Web App Hybrid App Use Javascript ? Addition Data ? Ajax / Pjax / Jsonp ? Animation ? Entrance ? …… Front-end 架构Performance Collector Write to Queue Data Queue Async, Read from Queue Agent Compressor + Sender Back-end Js LibraryUse LocalStorage Use HTTP GET 1*1 GIF See NextFront-end Back-endBack-end 架构 Front-end Nginx Storm Queue 按地址位置、设 备、浏览器、运 营商等信息做实 时数据汇总，并 计算用户访问流Dashboard按分钟、小时、天、周等预先预聚合数据提供快速图表查询Front-endAlerting对实时数据和同期做对比，当发生明显差异的时候发生报警Back-endPush ServiceHive / HBaseDashboard Real-time Report Service ApplicationsReal-time App, 2s Near Real-time App 10s Scene #2, #5 AlertingReal-time App, 2sScene #1, #2, #3HBase和Hive中保存明细数据，可帮助快速排障Storm 拓扑Timed SpoutLog Spout UBTTopology 解数据包，过滤 异常值等ETL处理 Timed Bolt Esper BoltNotification Bolt ETL BoltDelivery Analysis Bolt Bolt 按分钟统计汇总数据AlertingTopology EventSpoutHadoop 存储WriterWriterWriterWriterHBaseHDFSPerformance DetailDashboard MetricsRaw Data RCFileHadoopHiveMRScene #1 – 实时性能看板及预警性能实时趋势图综合反映当前的性能概况，若与历史同期比发生异常则最优先检查最近发布以及服务器状况运营商网络性能反映不同网络下的性能，若某一特定网络出现异常则需要检查CDN线路以及公司对于相关网络的出口带宽 Scene #1 – 实时性能看板及预警 用户设备性能若部分设备出现异常则需要检查代码兼容性或者关注相关系统的升级补丁地理位置性能 若少数城市出现异常则需要检查网络线路Scene #2 – 故障排查 页面请求当发现某个页面慢的时候查看每一个Ajax / Jsonp调用的性能概况耗时分布对于性能不稳定Restful Service，查看耗时分布，找到异常点Scene #2 – 故障排查访问流根据用户的访问流上下文环境分析用 户当时的环境，找到具体慢在哪里性能详情查看某一分钟的性能详情，找到访问慢的请求Scene #3 – 增量更新推送■ 推送增量更新必然会占用一部分的带宽资源■ 性能数据能实时反映用户当前的真实使用状况■ 选择网络性能良好的时机能让用户感觉到更新更加平稳，甚至察觉不到■ 灰度推送更新，保持核心网络通畅Scene #4 – 数据大小监控■ 在收集性能数据的同时，可以获取页面请求的Restful Service返回到客户端的Response Size■ 通过分析和监控 Response Size 的变化，预知对用户产生的影响， 避免不必要的风险■ 同时对于有固定类型返回值的接 口，若Response Size分布异常， 可以帮助快速定位问题Architecture Value■ 实时性能监测■ 每个真实用户的使用体验■ 应付复杂多样的移动网络■ 构建用户访问流，快速定位问题，重现用户访问环境THANK YOU