构建BOSS多层次多角度网络与应用性能分析系统.docVIP

构建BOSS多层次多角度网络与应用性能分析系统 　　摘要宁夏联通BOSS系统以银川为中心,覆盖宁夏全省,其业务涵盖了计费、结算、账务、业务管理、客服等方面。如何从整体上保障BOSS业务系统高效运行,对于提高全省联通服务水平、管理水平和经营决策水平意义深远。 　　关键词 BOSS;网络;应用性能 　　中图分类号TP393 文献标识码A 文章编号 1674-6708(2010)23-0205-02 　　 　　1 需求分析 　　宁夏联通BOSS系统以银川为中心,覆盖宁夏全省,其业务涵盖了计费、结算、账务、业务管理、客服等方面。如何从整体上保障BOSS业务系统高效运行,对于提高全省联通服务水平、管理水平和经营决策水平意义深远。 　　宁夏全省BOSS系统运行在负载均衡层面、WEB层面、中间件层面和数据库层面的四层系统架构下,由各个设备厂商维护自己的设备;过去当联通管理层接收到BOSS系统访问“慢”的反馈时,各层面的维护人员都可以证明自己的设备没有问题,比如CPU、内存利用率都正常等的信息,这样各层面独立分析的情况必将导致问题的排查进入到迂回的僵局中; 　　为了能站在网络的角度,从整体上对BOSS系统各个层面的性能进行监控分析,从技术手段上保证网络和应用的可视性、预防问题的出现,提高IT工作人员的生产率,具体来说,包括以下几个方面: 　　1)对网络与应用性能提供全面深入的可视性,快速排障 　　(1)从多个角度监控BOSS系统架构中每一层面的应用服务响应水平,呈现关键性能指标,客观评估用户体验在各个层面的反映; 　　(2)从宏观整体到微观个体区分网络响应与应用响应的时延,快速判断故障根因;系统提供易用快捷的操作方式,能够直接在视图上进行关联分析,不需要管理员多次输入查询条件就得到分析结果。 　　2)通过历史基准与周期对比实现故障预防 　　(1)为BOSS系统各个层面建立历史基准模型,为实现故障预防提供可靠依据; 　　(2)提供每一层面网络流量水平与应用响应时延的周期对比,随时监控系统调优前后的KPI变化,客观评估网络与应用改造成效。 　　3)智能告警并提供证据,对影响性能指标的相关因素进行关联分析,提高工作效率 　　系统提供流量水平与响应时延水平的智能告警并提供导致告警的证据,对影响性能指标的相关因素进行关联分析,体现客户数、连接数与服务器响应时延的关系。 　　2 解决方案 　　在项目第一期,BOSS营帐系统在宁夏全省数据中心部署了一套网络与应用性能分析系统,包括一台内置存储的硬件探针与一套管理软件。如图所示,在省数据中心的思科网络交换机同多个不同的应用服务器相连接。通过交换机端口镜像,探针采集应用服务器流量,在混合的流量当中可以把负载均衡、WEB、中间件与数据库各个层面的流量进行区分并单独进行分析;探针定时将各种性能参数传送给管理软件,管理软件将这些分析数据综合整理并加以分析。网络管理人员可以随时随地地通过WEB浏览器获得网络与应用的实时视图和报纸格式的历史报表。 　　3 使用经验 　　传统的仪器仪表型工具,其特点是紧急式的反应工具,通常是等有故障发后才接入网络进行分析,由于缺乏历史数据,无法重现偶发的故障现象,更不能建立历史基准,通过周期对比实现故障预防,另外,在分析数据呈现方面,也很难真正做到客户化、层次化。 　　在项目第一期部署的网络与应用性能分析系统,虽然仅包括了一台硬件探针与一套管理软件,但基本上满足了本文需求分析提到的多项具体功能,由于一套管理软件可支持多台硬件探针,因此可以按实际需要增加部署硬件探针的数量。 　　接下来,结合实际的工作需要,介绍我们对BOSS营帐系统进行网络与应用性能分析的经验案例: 　　1)从多层面分析网络与应用性能表现,提供全面的可视化 　　(1)同时在每一层面中区分网络响应时延与应用响应时延,快速判断故障根因; 　　(2)从多个角度监控应用服务响应水平,呈现关键性能指标,客观评估用户体验; 　　我们先说明如何区分网络响应时延与应用响应时延,以及历史性、多角度报表所能够体现的作用; 　　09年底某天宁夏银川BOSS运维部门接到营业厅用户反映,说感觉访问业务系统慢,宁夏 　　网盟的工程师通过网络与应用性能分析系统,快速定位至在WEB与中间件交互过程中出现了异常,通过报表,得出这样的一个结论:在“只有10.243.xxx.3这台WEB服务器访问中间件层面的网络交互过程出现问题”;因为所有的WEB服务器放置于同一网络架构中,各台WEB服务器性能表现跟历史同期比较完全正常,只有这台服务器访问中间件层面的服务器过程出现异常,因此毫无疑问的是这台WEB服务器自身的问题导致网络交互的异常出现,进而导致该WEB服务器负载区域的用户感觉到“慢”;得出结论后告知这个设