性能优化不是仅局限于后台----Qzone性能优化报告.pdf

性能优化不是仅局限于后台 Qzone性能优化报告 QQ空间产品中心 Qwang Qzone优化概述 存储优化 日志重构 访问优化 接入层 逻辑层 表现层 日志重构前问题分析 数据量增长过快 总数据量9T 日增长量约20G 扩容需进行大量数据搬迁 Cache命中率低（50%），DB压力大 旧系统结构 模块 日志回复 日志标题 日志计数 优点 CACHE 内存化，提升 性能 多进程号段分布处理 业务异步化 缺点 CACHE量有限，命中 率低，对DB 的性能依 赖比较重 模块相互独立，容易造 成数据不一致 Qzone数据层优化（日志重构） 与产品经理的Trade-off 区分近期日志与往期日志 区分活跃数据、非活跃数据和历史 归档数据 二级缓存（内存+文件） 针对单个号码进行路由 新系统结构 CGI 接入 接入 接入 共享内存 共享内存+文件 共享内存 CACHE处理 二级CACHE处理 CACHE处理 W DB接口 DB接口 DB接口 DB DB DB 日志标题 日志信息 访问计数 系统分三个模块：日志信息、日志标题、访问计数 CGI层对日志标题、访问计数模块有读/写权限；对日志标题模 块只有读权限，其数据来源于日志信息模块 日志信息模块结构 Data Proxy Data Proxy Data Proxy CACHE路由数据 CACHE路由数据 CACHE路由数据 Route Client Route Server Route Client 以单个号码为单元 做路由 数据淘汰 接入 数据淘汰 接入 数 CACHE数据 数 CACHE数据 据 同步 共享内存 据 同步 共享内存 管 访问流水