魅族多机房部署方案.pdf

魅族多机房部署⽅案 魅族科技-技术平台 何伟 个⼈介绍 • 何伟 • 2009年加⼊魅族 • 负责魅族科技互联⺴-技术平台 ⼤纲 • 为什么要做多机房部署 • 多机房部署⾯临的挑战 • 魅族的多机房部署⽅案以及踩到的坑 • 多机房流量调度 • QA 为什么要做多机房部署 业务的⾼速增⻓ - ⽤户量增⻓ • 2014年转型以来，⽤户量达到2500万 为什么要做多机房部署 魅族的关键业务量 • 应⽤商店，⽇PV2.5亿 • 在线⾳乐，⽇PV2.3亿 • ⽤户数据同步， ⽇PV3.6亿 • 同步数据量300亿条记录 为什么要做多机房部署 单机房扩展困难 ＋ ＋… 为什么要做多机房部署 单机房⽆法容灾 ＋ ＋… 当机房不可⽤ 领导 苦逼⼯程师 多机房部署⾯临的挑战 数据⼀致性难以保障 跨机房专线昂贵、⽆保障 流量怎么精准调度 业务改动必须⾜够少 业务依赖关系复杂 跨机房⺴络延迟 跨机房部署⽅案 我们把⼤部分业务映射到以下两类： • 读多写少的业务 • 按⽤户维度划分的业务 魅族的多机房⽅案-应⽤商店 业务特点： • 榜单展⽰ • 数据变化少 • ⼀致性要求不⾼ 应⽤商店单机房架构 应⽤商店多机房部署 魅族的多机房⽅案 - 数据同步 业务特点： • 读写均衡 • 数据量⼤ 同步业务单机房部署 机房间流量调度 • 智能DNS • GSLB 智能DNS流量调度 智能DNS GSLB 同步服务(WEB)根据⽤户ID调度 实施过程存在的问题以及对策 • VPN设备CPU过⾼ • 异地机房Slave Mysql跟不上Master 跨机房VPN ⺴络问题对策 • 电信和联通两个VPN相互备份 • 核⼼数据⽤QoS保障 • 使⽤专⻔的VPN设备 未来多机房⽅案展望 • 数据库统⼀管理平台（复制、备份、恢复、迁移、扩容...） • 随⽤户常⽤地变更⽽灵活迁移数据的⽅案 • 多点写⼊ • … 25