弹性调度系统的架构设计.docx

? ? 首次公开菜鸟弹性调度系统的架构设计 ? ? 阿里妹导读：菜鸟方舟(ark)是面向菜鸟所有研发的资源管理和运维平台，负责对菜鸟的基础设施资源进行管控，以支撑日常和大促的资源需求。弹性调度是菜鸟方舟的一个重要组成部分，也是方舟的一个重要的功能特性。 通过弹性调度，能够使应用在业务压力上升时及时扩充资源，而在业务压力下降时对资源进行释放，从而实现在保证稳定性的前提下尽可能地提升资源使用效率。在未来引入离线任务进行混部，或者细粒度资源计价方式后，这种模式将会大幅度降低菜鸟整体IT成本。今天，我们来细细聊聊菜鸟方舟弹性调度系统背后的技术，希望对你有所启发。 为什么菜鸟需要弹性调度？ 在弹性调度出现之前，菜鸟整体资源使用率都处于一个比较低的水平，这是因为： 1.在线应用一般是通过单机性能压测，并且结合经验预估业务流量的方式来确定所需容器数量。这种方式很大程度上会受到评估者主观因素的干扰，在估算业务流量时也通常会保留较大的冗余。 2.以往的模式下，一个应用分组的扩缩容操作频率很低，这使估算业务流量时，需要以每天的峰值流量以及未来一段时间（通常以月为单位）内业务的发展情况来作为评估标准。而一般峰值流量出现时段可能只占全天时间的一小部分，非峰值时段就出现大量的资源浪费。 从接入的弹性应用分组表现来看，容量评估不准确是非常普遍的现象，而且与实际偏差值非常大。弹性调度作为一种在线动