万亿级消息背后：小米在消息队列的实践.pdfVIP

万亿级消息背后：小米在消息队列的实践 勇幸@小米 2019.10 目录 • 业务背景 • 架构与关键问题 • 性能与资源优化 • 平台化效率 业务背景 Kafka 的痛点 小米的业务需求 • 存储计算强耦合：数据不均衡 • 无状态、无感知的快速扩容 • 运维痛苦：扩容、容错代价大 • 高弹性的容错机制 • 消费 Rebalance 抖动大 • 稳定、快速收敛的消费模型 • 企业级特性：多租户、 Replication 业务背景 Talos ：小米自研的分布式消息队列 • 对内满足小米各部门的业务需求，对外为生态链公司提供中间件能力 • 服务化对标 AWS Kinesis、Apache Kafka 业务背景 - 生态角色 在线消息队列+数据集成总线 目录 • 业务背景 •