DTCC2016-阿里巴巴数据库团队服务产品化之路的持续探索.pdf

阿里数据库团队 服务产品化之路的持续探索 2016-05 叶正盛(斗佛) 个人简介 • 阿里巴巴高级技术专家 • 1999年参加工作，从事过电力、外贸、ERP、自动化监控等软件研 发 • 2010年加入阿里巴巴DBA团队，现为数据产品负责人 • 国家认证系统分析师、数据库工程师 • CSDN博客专家 • 关注WEB、JAVA、数据库、云计算、数据云 • 微博：/yzsind 数据库技术团队简介 支付 余额 高德 阿里 菜鸟 淘宝 1688 宝 宝 地图 云 物流 速卖 芝麻 天猫 口碑 UC 钉钉 … 通 信用 数据库技术与产品服务 MySQL OceanBase MongoDB SQLite …… 职责 • 去IOE • 双11、支付宝春节红包 • AliSQL ，自研数据库OceanBase云服务 • 双机热备 -> 异地多活 • 数据库服务云产品 时代变迁 • Oracle->MySQL/OceanBase/MongoDB… • 双机热备->同城容灾->异地多活 • shell、perl、python、php •java/groovy/scala 、c/c++、hadoop/spark/storm • DBA具备研发技能，研发人员超过DBA • 我们在做云产品，直接服务阿里云客户 运维工具时代 时间 2003~2010 关键词 Oracle、小型机、存储、脚本 主要工作 安装配置、监控告警、备份恢复、诊断优化 工具时代 Portal B2B 淘宝 支付宝 表结 数据 数据 SQL 构变 查询 订正 审核 更 Oracle MySQL 初始 安装 巡检 化 监控 告警 备份 HA 快捷脚本 挑战 • 工具缺少统一规划 • 业务研发人员增长，沟通成本高，服务效率低 • 业务飞速增长，数据库无法线性扩展 • 技术可控性差 • 机房级容灾 平台与服务时代 时间 2011~2014 关键词 双11、去IOE、异地多活 主要工作 平台规划、建设、推广 数据库技术及产品服务(2015) 用户服务层数据库服务平台(iDB) 云用户服务 资源 开发 SQL 生产 分库 数据 流程 权限 数据 数据 申请 设计 审核