王梓晨：构建高可用的物流自动分单系统.pptxVIP

构建高可用的物流自动分单系统 主讲人 王梓晨 作为青龙的首发阵容成员之一，经历了6个版本的迭代。先后负责开发分拣中心、预分拣等系统。 自我介绍 利用规则把繁杂业务归类、利用高并发缓存架构设计来备战大促、 利用GIS技术与机器学习提升自动预分拣的准确率。 现任青龙架构师，曾主导把预分拣主服务的性能提升了数十倍。 注重细节，专注于技术与产品的结合。 王梓晨 京东 资深架构师 我们是青龙 京东物流配送 订单 仓库 预分拣 运输 配送站 妥投 z 下单 我们是青龙 青龙系统 即为 京东物流配送系统 预分拣 是用户下单后决定配送链路的系统， 直接影响库房订单的生产 预分拣 作为订单流程的一部分， 下传订单信息到运单系统 实现分拣中心快速作业 指导站点提前安排配送资源 让商家提前知道包裹配送的站点信息 预分拣的用途 标题一 标题二 标题三 根据订单收货地址、商品属性、卖家类型等计算末端配送站信息 从ofc获得订单信息， 下传订单信息到运单系统， 控制下传速度 为仓库、分拣提供打印时的包裹标签信息：站点，路区，京鲜达等信息 预分拣的意义 Click here to add your title. 大促来了，我们怎么办？ 遭遇战 阵地战 军事演习 茫然 不安 平常心 应对大促 变形记 应对大促 高可用的存储 更快的服务 大系统小做、小系统大为 面对大促，我们这样做： 1. Too easy to be ignored 同步异步化 2. 3. 4. 5. 1. Too easy to be ignored 最容易忽略的log4j 性能监控 方法、系统存活、 jvm、硬件指标 去中心化 slowlog消除 黄金流程资源冗余 可以被降级的服务 幂等性、灾备 基础资料、数据中心服务 （db、redis、es、cassandra） 1. Too easy to be ignored 接口保护 接口隔离 线程数设置，线程池策略，缓冲队列策略 实例权重动态调整，灵活上下线 01 02 03 更快的服务 2. 不可集中 使用中间件 依赖服务 最终一致性 问答机制(幂等性) 消息机制 异步调度框架 任务分级 限流 定时 同步异步化 3. Schedule策略 Fail-over 平滑切库 全局唯一id 如何双写，如何回退 join操作 Snowflake：分库分表必备 跨库索引？分页？ 高可用的存储 4. Stateless service 预分拣架构 Configuration Deep learning GIS POP OFW … …… 原子服务 大系统小做、小系统大为 5. 最终 一致性： 消息 任务补偿 复杂业务 原子服务、业务组合、invoker 隔离业务规则，独立 有状态 无状态，易用性 简洁 Function Global 交织 知识代理，优先级排序 规则变化 大系统小做、小系统大为 5. 频繁上线，如何保证质量？ 频繁上线，保证质量的措施 Key Failover 灰度化 回滚方案 紧急补偿 应急预案 统一配置 A/B 性能 自动分拣率 可扩展性 开放性 7*24小时不间断服务 数据建模提升准确率 满足各类型订单接入 分布式处理 Distribution 机器学习 Machine Learning 自然语言处理 Natural Language Processing 规则引擎 Rule engine 商家配送发货先知 自 营 订 单 外 单 回顾