百度搜索引擎可靠性设计.pdf

99.995% 自我介绍 •  百度网页搜索部 – 架构师 •  七年搜索引擎架构工作 •  流式索引计算系统 •  离线计算平台架构 •  大规模在线服务治理 •  百度C++标准委员会委员 •  分布式系统 高可用架构 目录 CONTENTS 服务发现的原理 典型应用案例 总结和思考 关键技术与实践难点 搜索引擎的挑战 搜索引擎的挑战 百度搜索引 擎的挑战 机器数量多, 服务数量大 数万台服务器, 数十万个服务, 分布在多个IDC 服务变更多, 变更数据大 挑战 每天几十万次变更, 每周10P量级的文件更新, 千余人并行 开发上百个模块 检索流量大, 稳定性要高 每秒数万次请求, 满足99.995%的可用性, 极短时间的故障 都可能引发大量的拒绝 服务发现的原理 什么是服 务发现 上游如何找 服务列表变化 到下游? 服务下游 处理能力变化 服务上游 服务下游 上游如何负载 健康状态变化 均衡?