运营商的新IT架构.docx

运营商的新IT架构1. 恒星的困扰运营商的IT支撑系统就像一颗质量极大的恒星，从它形成的那一刻起，内部持续而强烈的活动就注定了它天生不凡的体量。随着时间的推移，从纯语音时代走入了语音增值业务时代，再从语音增值业务时代跨入了今天的数据业务时代，IT支撑系统也如成长中的恒星，不断自我聚变，不断接受小行星撞入怀抱。旁观者难以想象这颗巨大恒星的复杂程度，十年前一批国际计费产品巨头杀入中国，希图凭借成熟的商业套装产品，加上根据运营商的业务与需求差异进行少量的定制开发和参数修改，取代耕耘在定制化开发多年的国内厂商。最终这场泡沫不出意料地破灭，波折过后，国内运营商还是回到了高度定制化的老路，大型的IT系统依旧在开发、运行和运维场景下，面临严峻的考验。2. 天空飘来一片云身为运营商一员，多年来我们常常思考一个问题，是技术驱动业务还是业务驱动技术？这个问题看似容易回答，其实往往容易迷失其中。每次技术的大浪潮来临时，我们都需要时刻保持清醒的头脑，既拥抱变化，又不忘初心。从06年谷歌第一次提出云计算开始，简单罗列一下这朵云里包含的新名词：VMware、HyperV、KVM、VSphere、SystemCenter、OpenStack、SDN、SDS、Hadoop、Spark、Storm、Docker、Kubernetes、Mesos、Swarm、Yarn、MicroService、DCOS、DevOps…，一路走来，浙江移动IT系统从云计算2.0时代稳步迈入3.0，从关注基础设施云化走向关注敏捷应用开发与生命周期管理的应用云化，从非关键应用云化走向电信网络应用和企业关键应用云化，资源管理从静态调度走向动态调度。大浪淘沙、去粗取精，逐渐摸索出一条适合中国移动的、具有浙江移动特色的IT发展道路。2016年浙江移动云计算中心正式成立，通过以去IOE为抓手实现基础设施的标准化，以服务PaaS化和平台容器化为着力点推进平台架构改造，从而打破竖井，驱动企业IT架构演进。目前浙江移动云平台服务能力达到22种，建成集团内最大软件定义分布式存储（SDS）集群，全国率先实现服务去O，非核心交易系统中大量使用国产和开源数据库，稳健控O。同时通过选择合适的开源技术路线，创新性的研发和应用数据中心操作系统（DCOS），真正实现资源全局调度、容量弹性伸缩，为公司一云三域发展奠定了坚实的基础。在云运营体系方面，不断推进云平台服务流程标准化，不断完善云运营体系，提升服务能力，推动应用上云。通过建立标准流程、梳理服务套餐，项目上线效率提升40%，云平台平均服务开通时间缩短1/3，云租户服务SLA达到99.95%，达到领先互联网公司水平。3. 恒星的演化3.1 统一的私有云平台为构建资源共享、能力集中、具备一定动态调度能力的大 IT 基础设施和运营能力，实现云资源与服务的统一集成、统一资源管理、统一运维监控，兼顾考虑各类资源和业务的安全等级和共享程度，引入 VDC解决面向不同业务特点和安全等级的适应性问题：（1）核心系统VDC：涵盖计算、存储以及通用数据库云资源，支撑B\O\M三域IT系统内部交互。计算资源以X86虚拟机为主，存储资源为集中式存储+SDS存储。（2）DMZ VDC：涵盖计算、存储资源，支撑B\O\M三域IT系统的外部接入。其中计算资源以X86虚拟机为主，存储资源为集中式存储+SDS存储。（3）大数据VDC：涵盖计算、存储资源，其中计算资源为X86物理机，存储资源为分布式本地存储。目前私有云资源池部署了超过XXX台X86物理机，集中式存储池和分布式存储池总和超过XXX PB，大数据存储接近XXX PB。?3.2 新一代云管理平台新一代云管理平台，将重点突破PaaS层云资源管理的技术难点，全面实现PaaS能力从资源申请、分配、管理到回收的端到端服务能力，实现IaaS资源、PaaS资源统一纳管。同时具备一站式的应用管理能力，实现从资源分配到代码编写、应用发布上线的全流程一站式管理，支撑企业级DevOps开发模式。因为项目正在进行中，这里不多费笔墨。?3.3 DCOS研发与实践浙江移动系统进化的过程，从传统孤岛一直到数据中心化，中间经历了软硬件的标准化，IaaS资源池化，应用层面云化等阶段，业务构建周期也由月缩短到周，再由周缩短到日，也面临分钟级的业务构建要求。另外，为进一步提升资源利用率，对于资源弹性扩缩的要求从虚拟机级别上升到集群级别，再由集群级别提升到数据中心级别，以求实现更大范围的资源弹性调度。所有这些需求促使我们踏上DCOS的自研之路。在结合行业主流技术方案，通过关键技术选型（Mesos or Kubernetes），我们最终确定DCOS技术架构，以容器为基础封装各类无状态应用和运行环境，以Mesos+Marathon为核心实现容器资源的分布式调度与协调，目前已完成