《richbox架构演进_张勇》.pdf

Richbox系统架构演化 作者：张勇(SuperMan) 什么是Richbox? A. 推⼲ B. NBA Box C. 搜索结果 D. 新闻BOX E. 搜索历史 F. ⼲告 G. 还在搜 H. 其它.. 什么是Richbox? ⾃然搜索结果和Richbox对⽐ ⺴⻚⾃然搜索 RichBox 后台数据 依照爬⾍爬取的 通过如开放平台收录，垂直引擎 收录，第三⽅数据收录的 ⽤户体验 通⽤的标题，摘要，链接富态化展现，结构化数据的表 模板 达，减少⽤户信息查询的深度。 数据结构 标准化数据（标题；摘多样的结构化数据。 要；时间，anchor等） 排序⽅法 BM25等⽂本相关性算法 基于数据挖掘的排序 查询词覆盖 覆盖所有查询词 依照重要程度，依次覆盖 4 如何做好它？ ➢ 分需求分类做好 ➢ 避免引⼊其他伤害（噪⾳） ➢ 扩⼤召回 ➢ 多意图识别 ➢ solution体系（知识图谱） ➢ 各种优化召回率、准确度、Ranking... 5 不过？ CGI QPU/QRW RBU/Broker Merge APPB SBU Combo OpenSE VDAP 其他 我们今天要讲的是？ ‣ Web 架构的演化过程 ‣ 数据接⼊平台到开放平台的演进 ‣调查： 1 、Web开发 2 、后台开发 3 、Devops? 巨⼈的肩膀 Memcached 我们是从这⾥开始的 问题与挑战 • ⽤户越来越多 • DNS不准？ • ⽤户反映访问速度慢 • ⼤家都⽤专线？ 折腾 • 利⽤⾃建IP库 • ⾃建智能DNS • 搭建测速系统 • 优化⺴络层：慢启动窗⼝、超时重传、RTO、快速重传等 • 搭建堡垒系统 • 优化⺴络路径 回到Web端 原始状态 问题与挑战 原始状态 ‣ 响应时间经常超过1秒甚⾄2秒(server端） ‣ Memcache timeout (1s) 解决办法 原始状态 socket ‣ 使⽤socket+Me