当当架构平台化与发展规划.pptxVIP

当当架构平台化之道 大纲 • 业务体系介绍 • 当当中间层技术 • 平台化 业务特征 海量用户 7*24 品类繁多 流量突增 业务复杂 业务架构图 退换货 会员 促销 推荐 搜索 客服 结算 配货 库存 价格 商品 支付 卖场 首页 列表 专题、馆 商品详情 交易 购物车 交易结算 一键购买 订单 订单中心 订单详情 履约 仓储 实物库存 库存调拨 库存优化 物流 预分拣 快递管理 物流跟踪 规模 互联网架构的核心问题是什么 数据 海量 响应 迟缓 系统 繁多 开发 困难 稳定 性差 伸缩 性差 解决方案 分片 化 异步 化 服务 化 规范 化 高可用 弹性化 • 服务框架 分片 化 异步 化 服务 化 规范 化 服务发现 负载均衡 服务治理 监控报警 服务化框架核心概念 远程调用 异构语言 Dubbo Dubbo Dubbo解决方案 服务提供者 业务代码 服务提供者 业务代码 Dubbo 业务代码 服务消费者 注册中心 Zookeeper 集群 Dubbo 业务代码 服务消费者 监控中心 服务发现 负载均衡 服务治理 监控报警 Dubbo缺失的部分 远程调用 异构语言 Dubbo Dubbo 服务提供者 业务代码 服务提供者 业务代码 业务代码 服务消费者 Dubbo 业务代码 服务消费者 注册中心 Zookeeper 集群 Agent Agent Agent Dubbo Agent 监控报警 监控治理中心 SLA统计 系统调用图 报警 异构语言 DubboX 服务提供者 业务代码 注册中心 Zookeeper 集群 DubboX 服务提供者 业务代码 负载均衡 Nginx 异构语言业务代码 Agent 服务消费者 异构语言业务代码 Agent 服务消费者 监控治理中心 Agent Agent • 数据中间层 • 服务框架 分片 化 异步 化 服务 化 规范 化 数据中间件实现方案 数据库 ORM 异构语言 性能 Proxy 仅MySQL 任意 任意 损耗略高 ORM 任意 单一 仅Java 损耗低 JDBC 任意 任意 仅Java 损耗低 开源数据中间件现状 功能 Cobar Cobar-client TDDL 分库 分表 结果归并 事务 成熟度 支持 不支持 不支持 弱XA 中 支持 不支持 不支持 弱XA 低 未开源 未开源 未开源 未开源 - SQL SQL SQL Sharding-JDBC 分库分表 解 析 改 写 路 由 并 行 执 行 结 果 归 并 事务 弱 X A 最 大 努 力 T C C 分库分表 应用 业务代码 Sharding- JDBC 应用 业务代码 Sharding- JDBC Sharding-JDBC 内部实现 分片规则配置 JDBC规范重写 SQL解析 SQL改写 结果归并 SQL路由 SQL执行 单库性能损耗约0.02% 单库性能 双库性能提升约94% 多库性能 • LIMIT m, n = LIMIT 0, n • 跳过前n条数据 • 比较并返回最小(大)值 • 多结果集累加，DISTINCT暂未实现 • AVG(expr) = SUM(expr), COUNT(expr) • return SUM / COUNT • 排序列生成补列 • 多结果集归并排序 • 分组列生成补列 • 所有结果集加载至内存进行分组、聚合、排序 • 生成笛卡尔积的路由结果集 SQL兼容性 LIMIT MIN，MAX SUM，COUNT AVG ORDER BY GROUP BY OR 分布式事务解决方案 一致性 性能 最终一致性 业务无感知 XA 是 低 是 是 弱XA 否 无影响 否 是 柔性事务 否 无影响 是 否 • 最终成功 • 无业务入侵 柔性事务 最大努力 TCC •类原生事务 •业务感知 成 功 柔性事务 – 最大努力送达型 应用 业务代码 Sharding- JDBC 应用 业务代码 Sharding- JDBC 业务库 事务库 异 步 送 达 作 业 事务同步送达 内部实现 执行前事件 记录事务日志 执行结果事件 监听执行事件 失 败 重试执行 成 功 清理事务日志 读取事务库 重试执行 成 功 清理事务日志 Roadmap 分布式主键 读写分离 HA相关 动态扩