阿里云弹性计算亿级业务调度技术揭秘.pdf

阿里云弹性计算亿级业务调度技术揭秘 技术创新，变革未来 阿里云 智能调度平台后羿 当前调度 单可用区 分钟 每天后羿调度 服务客户数量 管理区域数目 并发创建 数量 数量 公有云 集团 蚂蚁金服 测试域 专有域 专有云 在线调度系统 异常 离线 库存 调度 调度模块 数据 库存模块 调度 供应 系统 中台 系统 系统 标签系统—物理机资源抽象 调度模拟训练 ，可用区之间库存平衡调度 调度策略 功耗学习 ，可用区内 调度 负载学习 负载学习 ，物理机内部调度，本地磁盘， 亲和性调度等调度 网络流量学习 后羿调度的大脑 后羿调度的情报处 数据中台 工作流 后羿调度的基石 后羿调度的训练师 标签系统 调度模拟器 • 从物理机维度，依赖实时上报和数据 回流去构建整体的机器画像，通过离 线对数据做一些分析处理之后，把机 在线 实时 器前一段时间的健康状态回流到调度 数据中心库 调度系统 元数据库 同步 数据清洗 系统中 利用率 数据聚合 健康信息 数据分析 监控代理–信息采集 强 弱 的引入，支持类似期望这些虚拟机尽量到符合条件的机器上去 表达式的支持，在特定场景下，通过实时传入表达式来达到这个目的，动态调 整调度策略 多重的调度权重因子，会考虑物理机健康度、机型策略，装包策略等，通过 多个因子共同决策最符合条件的调度机器 高度可配置化，现实中，例如集群中资源的分布在发生变化，通过外部分析 实时调整相关调度策略以及因子 • 目前采用强化学习