技术架构及演进.pdfVIP

技术架构及演进 周迁@糗百 一些数据 • 2000w注册用户，4000w非注册用户 320w 日启动用户，2000w 日启动次数 1亿动态请求/天，峰值30000/sec 11台应用服务器(8核8G)[5台支撑web，6台支撑app] 18G memcached 6台mysql服务器(master4核4G, slave4核16G) 关于架构 • 没有最好的架构，只有最合适的架构 简单就是美(KISS) 不断改进和优化 可扩展很重要 强大的架构在处理增长时通过简单增加相同的东西(服务器)来应对， 同时还能保证系统的正确性 技术选择 • It will fail, keep it simple 工程师以一当十？服务器以一当十? 选择标准：成熟，简单，用的人多，良好的社区氛围， 持续的优异性能，很少失败，开源，轻量级 nginx, tornado(python), memcached, redis, mysql nginx • 高并发连接，内存消耗少，稳定性高 缓存图片等静态文件 反向代理，快慢分离 所有的请求都通过80端口的nginx进程分发 动态内容 走localhost上的torando进程 tornado • 非阻塞式设计(epoll)，轻量级web框架 尽量少使用异步接口 多进程: 单服务器部署多个tornado进程 快慢分离 app, web服务独立 upstream appends{ server :8716; server :8717; 快慢分离 … tornado } upstream appslowends{if cache : return self.write( cache ) server :8711; elif self.request.uri.find(slow)0 : … arg = ?slow if self.request.uri.find( ? ) = 0 else slow (list acc Redirect 1) } self.set_header(X-Accel-Redirect, self.request.uri + arg) return … … location / { proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; if ( $query_string ~* slow ) { proxy_pass http://appslowends; Memcached • 多服务器，多节点 一致性哈希 每个机房单独一组memcached节点 Mysq • 读写分离 双master, 多slave 跨机房同步：每个