某农商银行IT智能运维一体化建设研究与实践.doc

? ? ? ? ? ? ? ? 某农商银行IT智能运维一体化建设研究与实践 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 研究与实践 某 农商银行高度重视信息化的建设与发展，不断引入新的信息科技技术和理念，逐步促进银行服务的形态和内容更新，在服务理念、经营模式等多个方面实现转型升级。伴随而来的是 某 农商银行科技信息系统规模的不断扩大，虚拟化、大数据、智能化等新技术的不断应用，导致IT运维管理的规模和复杂程度不断增加。为了提高 某 农商银行运维管理能力，增强运维管理效率，实现对信息科技系统运行的全方位管控， 某 农商银行不断学习借鉴前沿的运维管理技术理念，并结合银行信息科技发展现状，研究并实践出一条符合中小金融机构的智能运维一体化发展路线，并在此基础上不断实践完善。 一、建设背景 伴随着 某 农商银行信息科技的迅猛发展，早期分散式、粗粒度、低效率的IT运维管理模式已经难以满足现有规模大、多层级、全覆盖的运维管理需求，迫切需要通过管理和技术手段来提升运维能力。近年来提出的AIOps表达了智能运维一体化的先进理念，并在大型的金融和互联网机构形成了一些成功的应用案例，但是作为中小金融机构，从IT规模、人员配备、投资预算各方面都难以支撑商业大型一体化运维管理平台的实施与应用，所以 某 农商银行必须走一条符合自身条件、可行可控，并能够迭代发展的AIOps建设之路。 （一）建设思路 流程驱动运维：借鉴IT I L运维流程标准，定制适合 某 农商银行实际的运维管理流程平台； 工具驱动运维：采用运维开发模式，实现运维任务的自动化、工具化、可视化； 数据驱动运维：基于大数据采集、存储、分析技术，对运维数据进行全面挖掘和分析，实现数据驱动运维； 平台驱动运维：通过建立统一运维平台，整合贯通CMDB、流程平台、监控平台、作业平台、数据分析处理平台，形成智能运维一体化解决方案。 （二）实现路径 按照以上建设思路，结合 某 农商银行的实际情况，将智能运维一体化建设的实现路径划分为五个阶段的演进过程。 阶段一，可视化运维 通过对原有监控平台的基础功能发掘扩展，并结合BPC（旁路式业务性能监控）、Web拨测、统一日志分析审计系统等技术，实现监控平台全方位展示业务健康状态指标 。 阶段二，标准化运维 制定体系化的运维管理制度、规范运维管理流程，并结合CMDB配置平台，实现资产和运维管理的标准化。 阶段三，自动化运维 采用自动化运维工具和统一作业平台，通过运维流程编排、自定义脚本开发，实现批量巡检、补丁升级、安全加固等不同场景的自动化维护。 阶段四，数字化运维 通过将所有运维和监控所采集的数据在大数据平台上进行转换、清洗和管理，实现数字化建模，用于支撑运维场景优化、故障 原 因分析和智能决策。 阶段五，统一运维管理平台 通过搭建统一运维管理平台，整合CMDB、流程平台、作业平台、大数据平台等组件功能，实现各个组件之间的数据共享和联动，最终实现智能运维一体化建设。 二 、阶段一——运维可视化建设 运维可视化建设的总体目标，一是实现 某 农商银行科技信息系统运行状态的多维度展现，二是实现对业务系统故障的精确告警，三是实现运行数据的采集，同时提供接口为后期的大数据平台提供数据支撑。为实现上述目标， 某 农商银行采用了 商用 智能 监控 管理中心、开源监控平台、BPC旁路流量分析系统和日志分析审计系统相结合的方式。 （一）监控平台的实施及扩展 智能 监控 管理中心是下一代业务智能管理平台。它以统一的风格提供与网络、主机相关的各类管理、控制、监控功能，同时以开放的、组件化的架构向其承载业务提供分布式、分级式交互管理。智能 监控 管理中心是 某 农商银行进行网络和主机监控的统一平台。 某 农商银行初期通过智能管理中心实现了对数据中心网络、主机的基础硬件、系统容量、性能等基础指标的监控和告警功能，但是针对业务系统、批量作业、应用日志的监控告警还需通过人工操作进行。为了实现可视化管理，并能够做到业务系统故障能够及时准确的在监控平台上统一展现，同时各项数据能够进行统一收集存储， 某 农商银行对智能管理中心进行了定制化改造，通过整合监控平台、应用系统日志、操作系统日志，并结合自定义脚本程序等方法，实现了对数据中心基础硬件环境和业务系统的统一监控管理。所有服务器操作系统采用 S yslog协议将系统错误、应用告警、跑批告警信息等 E rror级别信息，通过监控脚本发送至I告警平台， I nfo级别信息，发送至日志审计。已知业务告警均为脚本触发，触发级别为3 (Error)，经过和告警平台商定，根据大屏告警关键字为JTGL，实现所有告警都会被记录，并实现有关键字的告警会有额外提示。 （二）网络流量智能分析系统 通过智能管理中心，我们实现了