SinaAppEngine.pptVIP

Sina App Engine - deep inside cloud service /saet SAE Team 前言 什么是 Sina App Engine Sina App Engine的发展现状 SAE和微博是啥关系 关于SAE的外部好消息 关于SAE的内部好消息 提纲 Cloud Service RDC MemcacheX TaskQueue Cloud Service Image DB TaskQueue Cron RDC Stor DeferredJobs Appconfig Fetchurl MemcacheX SMail XHProf . 覆盖整个Web服务 . 精英团队作战 Php Tmpfs Cloud Service Cloud Service App Sandbox: RDC 什么是RDC: Relational Database Cluster RDC的目标： 1，监控百万数量级的DB，包括心跳检查、主从同步检查、节点负载 2，管理百万数量级的DB，包括启动、停止、迁移、重启、切换 3，被动复制模式的HA 4，支持MySQL5通讯协议，代理层完全透明，代理损耗低 5，无状态依赖，自身支持水平扩展 6，提供用户的DB的隔离性，保证整体集群的安全性 RDC RDC与MySQL在实现上的一些不同 1，多进程 vs 多线程 2，SQL解析，词法分析 vs 语法分析 3，Query Cache 特别说明： 1，RDC不负责用户数据库的水平扩展，所以水平扩展需要用户自己做分表 2，RDC自身提供一主多从的DB结构，上层支持读写分离 3，为了整个数据库平台的安全和可靠，RDC会根据自身的预判算法预先屏蔽某些SQL语句 4，RDC强烈建议用户使用正确的MySQL调用习惯，对每个MySQL函数判断返回值 RDC RDC 如何使用RDC 主库 =》 :3307 从库 =》 :3307 RDC RDC的预判机制： 1，语句 select update insert delete replace create table alter table create index 2，三道封锁线 3，SQL并发执行时间和 RDC Benchmark： 硬件环境： 4Core 3GHz，4G 软件环境： CentOS 5.1 C++ boost 1.36 MySQL Server version: 5.0.87-log Source distribution 标准压测脚本，/usr/local/mysql5/sql-bench/run-all-tests RDC vs 标准MySQL with QueryCache -5% without QueryCache -10% 增强功能： 1，水平扩展 2，监控与系统结合 MemcacheX 什么是MemcacheX MemcacheX的目的 1，low overhead 2，HA 3，Statics 4，Connection Protector 5, Data dump MemcacheX MemcacheX MemcacheX Connection保护 1，Connection LRU 2，Conection Timeout find-key = O(logN) insert-key = O(logN) delete-key = O(logN) get min-value = O(1) TaskQueue 1，什么是TaskQueue 2，和DeferredJobs的区别 3，如何使用TaskQueue TaskQueue TaskQueue 1，硬哈希 2，多进程 3，非阻塞timeout 4，master-slave 被动复制 5，worker延迟等待时间 6，worker死亡唤醒检查