基于Pytho构建可扩展的自动化运维平台-刘天斯.pptVIP

* 基于Python构建可扩展的自动化运维平台 主讲：刘天斯 (yorkoliu) ■ 个人介绍 刘天斯 (yorkoliu) 个人著作 -《Python自动化运维：技术与最佳实践》 -《Docker 技术与最佳实践》（待出版） 腾讯高级工程师 负责游戏大数据运维工作 荣获2010年度十大杰出IT博客 7个开源项目、4个发明专利 技术BLOG： Weibo： /yorkoliu 微信号：yorkoliu ■ 分享提纲 平台架构说明 平台模块定制 安全审计功能 C/S结构的实现 平台功能介绍 ■ 为什么选择Python 优势 - 默认安装且跨平台 - 可读性好且开发效率高 - 丰富的第三方库（开发框架、各类API、科学计算、GUI等） Python在腾讯 - 系统运维 - 业务逻辑 - 运营平台 - 测试工具 - 数据挖掘等 ■ 平台介绍（书籍案例） OMServer 一个集中式的Linux集群管理（基础）平台 - 业务集群管理 - 实时安全审计 - 功能模块定制 - 数据加密传输 - 支持主流Python组件 - 使用简单且体验好 - 代码开源 /yorkoliu/pyauto ■ 平台UI – 操作模块 模块列表 结果输出 输入参数 ■ 平台UI – 安全审计 安全审计实时跟踪 ■ 平台第三方库 Django - 一个开放源代码的Web应用框架，由Python写成，采用了MVC的软件设计模式 rpyc - 一个 Python 实现的RPC和分布式计算的工具。支持同步和异步操作、回调等 saltstack 、ansible 、func - 基本Python开发的自动化配置管理与流程控制组件 Mysql - 是一个非常流行的关系型数据库管理系统 ■ 当前内容 平台架构说明 平台模块定制 安全审计功能 C/S结构的实现 平台功能介绍 ■ 平台架构 - 总览 Web交互层 分布式计算层 集群管理服务层 主控端 被控端 ■ 平台架构 – 优势 管理端多机支持 安全性高，加密传输、定义私有通讯规范（TCP） 支持多种管理客户端接入（WEB、桌面、移动） 调用Python组件的高级特性（Playbook、State） 功能扩展性能力强，模块定制化 ■ 平台架构 – 操作流程 Omserver (Django) Omserver (:11511) RPYC Python module App Server 设备初始化模块 部署LNMP模块 部署Mysql模块 重启Tomcat模块 同步配置模块 … … ■ 平台架构 – 整合Python组件 Saltstack Ansible Func App Server 证书或SSH认证 ? API OMserver (:11511) ? 任务下发 ■ 当前内容 平台架构说明 平台模块定制 安全审计功能 C/S结构的实现 平台功能介绍 ■ 模块定制 任务模块 - 一个“操作事件”为颗粒的任务，如重载配置、部署缓存服务等 添加模块 - 定义任务模块“输入参数”，采用HTML Form元素 - 编写后台模块代码 运行模块 - 选择任务模块 操作对象 - 指定输入参数 - 运行 - 返回执行结果 ■ 模块定制 – 前端配置 输入参数 模块ID，与后台模块代码关联 ■ 模块定制 – 后台代码 任务模块 Mid_1001.py Mid_1002.py Mid_1003.py Mid_1004.py … … /ansible Mid_1001.py Mid_1002.py Mid_1003.py Mid_1004.py … … /saltstack Mid_1001.py Mid_1002.py Mid_1003.py Mid_1004.py … … /func 主程序加载任务模块 ■ 模块定制 – 后台代码 任务模块核心代码 5行 ■ 模块定制 – 后话 运维的核心工作 - 平台功能改进、升级 - 任务功能模块的编写 - 日常工作梳理（标准、流程化建设） - 系统、业务的调优 ■ 当前内容 平台架构说明 平台模块定制 安全审计功能 C/S结构的实现 平台功能介绍 ■ 安全审计架构 - 总览 Web交互层 集群代理层 ■ 安全审计 – 主机代理（Agent） /etc/profile 入库Mysql OMAudit_agent.py http_client =httplib.HTTPConnection(0, 80, timeout=5) http_client.request(GET, “/omaudi