消息中间件高可用架构.PDFVIP

万亿级数据洪峰下的消息引擎 China Open Source Conference 2017 演讲者： 鲁般@阿里巴巴 目录 ——CONTENTS—— 01 02 03 04 阿里消息中间件 消息中间件 双11万亿数据 RocketMQ5.0 发展历史 核心功能设计 洪峰的挑战 展望 PART01 阿里消息中间件发展历史 阿里消息中间件发展历史 Napoli RocketMQ 3.0 Apache RocketMQ ActiveMQ内核 RocketMQ开源 B2B大规模使用 进入基金会孵化 2016年度最受欢迎 中国开源软件 2007 2010 2011 2012 2015 2016 2017 Notify RocketMQ 1.0 Aliware MQ v1.0 成为Apache顶级项目 五彩石项目 顺序消息 阿里云商业版 交易核心消息流转 海量堆积能力 专有云输出 阿里消息中间件现状 有序消息，Pull 模式 MetaQ 海量消息堆积能力 事务消息, Push模式 RocketMQ 阿里云商业化消息中间件 交易核心消息分发 覆盖公有云、金融云、专 Notify Aliware MQ 有云、聚石塔 PART02 消息中间件核心功能设计 消息领域模型 消息组件交互流程 事物消息 Tips ： 1. 保证本地事务与消息处理的最终一致性，并非强一致性。 2. 消息中间件保证消息至少投递一次。 顺序消息 消费模式 广播消费模式 集群消费模式 消息过滤 基于消息tag、属性进行过滤 •语法: SQL92子集 •关键字: •NOT •AND •OR •BETWEEN •IN •TRUE •FALSE •NULL •IS •举例: a IS NOT NULL AND (a IN (‘abc’, ‘def’)) •Server端过滤，节省带宽 消息轨迹 PART03 双11万亿数据洪峰的挑战 历年双十一消息量变化 万亿+