基于多元线性回归的云计算容量估算研究.pdfVIP

1基于多元线性回归的云计算容量估算研究 岳飞山，韦 嫱 （同济大学软件学院，上海 201804） 摘要：为了解决电信企业云计算数据中心基础设施管理中的容量管理问题，采用理论分析和实验的方法，以理解数据 中心系统历史容量使用为依据，利用多元线性回归理论建立容量预测模型，并考虑业务突发对模型的影响，实验验证 了通过模型计算容量与系统真实占用容量接近的结果。研究结果表明：数据中心系统未来容量需求可以通过历史容 量分析建立多元线性回归模型来预。研究结论初步突破了数据中心系统容量不可预测、难于管理的认识，通过容量管 理可以使电信业保持系统容量利用率、成本以及服务质量之间的平衡，提升系统资源利用率，提升服务可用性，解决资 源瓶颈。 关键词：云计算容量估算多元线性回归 中图分类号：TP39 文献标识码：A 文章编号：1673-1131（2016）02-0001-03 1 背景 从网络神话的产生，到互联网泡沫破灭，再到当下如火如 荼的云计算和移动互联网时代，过去 10年 IT产业经历了一场 充满戏剧性的发展过程，也造就了 IT系统一种“过山车”式的 供给和需求模式。使得如今云计算系统的管理员不得不寻求 一种更新、更好的方法来规划和管理系统资源，做到既能有效 的保障提供的服务，也能适应新业务、新需求快速的扩展，同 时还能进一步降低系统运行和维护的成本。 当前电信企业在自身具备容量规划能力前，主要依靠 IT 系统的建设厂家，或依托业界的设计咨询公司进行架构设计 或提供容量规划的建议，其一般业务流程如下：对目标系统提 供的业务流程调研；了解系统架构、基础设施、网络拓扑结构； 走访运维人员，进行问卷调查；按照 ITIL或者其他的信息系统 运维、管理标准提供系统规划建议。虽然这些设计咨询公司 具有一整套容量规划的方法论，但受项目时间的制约，始终存 在不能深入了解目标系统的业务流程、系统架构等的问题，甚 至在某些关键点上出现调研不清楚的情况；同时，由于每个系 统具有的特点各不相同，盲目套用一套方法论容易存在落地 实施难度大、耗时长、不准确等问题；最后，由于每个项目的参 与人员经验不同，故容易导致规划建议准确性和可靠度因人 而异的问题。因此传统依靠外围厂商经验和能力进行容量的 规划已经不能适应于现在电信企业提出的降低 IT总体拥有成 本（TOC），提高 IT投资回报率（ROI）和提升精细化管理水平， 支撑动态业务的要求。这就使得我们需要在原来的基础上， 以业务的发展为指导，更加地深入了解业务与资源消耗的关 系，研究建立新的、满足移动自有业务特点的系统容量规划和 资源分配体系。 在此背景之下，提出了一种面向业务的云计算系统容量 估算方法，做到系统规模与业务发展水平相匹配，具体工作包 括： 首先，通过收集业务和资源利用率的海量数据，分析出业 务量与资源利用率的相关关系。同时，运用多种数学理论和 工具，建立起业务量与系统资源消耗量间的数学模型。其次， 从业务的角度出发，分析用户使用业务的内在规律，找出业务 发展的现有水平和未来趋势。并结合分析数学模型和业务发 展水平，得出该系统的容量规划和资源分配方案，对空闲资源 进行整合，提高系统资源利用率；对资源影响系统性能的资源 进行扩容，降低潜在的风险，提高服务的可靠性和持续性。最 后，结合云计算技术，探讨并给出了一套方案，实现了根据业 务的需求进行虚拟资源准确分配，有效地解决了因虚拟资源 分配不合理，引起系统资源的频繁回收与分配，造成云计算平 台中部署的业务相互影响的问题，为云计算技术的推广提供 了有效的支撑。 2 实现方案 2.1 性能建模原理 假定某云计算系统承载了 j种业务，每种业务消耗的资源 系数为 a j，每种业务的业务量为 Nj，那么 j业务的系统资源使 用量为：a jЧN j。根据多元线性回归理论，若业务量与资源使用 量满足相关系数较高的条件，则有： （1） 其中，Nij表示第 i 种情况下业务 j 的使用量；a0表示系统 中非业务对资源的消耗情况。例如：操作系统、监控的资源消 耗量等。Ri表示系统总的资源使用量。 等式 1 表示不同业务组合及不同业务量情况下，系统 资源的消耗情况。需要注意的是业务以及资源的选取均没 有任何的限制。资源可以是 CPU、内存、网络、磁盘等，通 过等式 1可以快速建立起多种业务与一种资源的消耗对应 关系。 根据矩阵理论，公式 1可以变形为： （2） 当矩阵 秩，R（H）≥j时，等式 2才具有 最优的近似解。此时我们就可以编写程序对其求解，得 2016 年第 2 期 （总第 158 期） 2016 （Sum. No 158） 信息通信 INFORMATION COMMUNICATIONS 2出业务 j与资源 R的准确消耗关系。 2.2 面向业务的容量估算步骤及实施