阿里分布式结构化存储发展之路.pptx

阿里分布式结构化存储发展之路Topic ? ?List1、使用背景和场景2、现有规模和容量3、基于业务的优化4、面向服务的OTS5、典型应用场景6、面临的挑战引入Hbase背景数据爆发式增长 Hbase适配场景数据爆发式增长?ms级别响应?KV?简单索引?数据生命周期?版本管理?Schema ?Free????????????我们的规模10+多 个IDC 部署 超 11000台规模 4个商业化集 群350+业 务单集群 800+基于业务的改进与优化?? 资源组隔离?–? 业务隔离?–? 集群规模化?–? 易维护基于业务的改进与优化?? 二级缓存：分布式Cache服务?–? 作为主cache与LruBlockCache混合使用??hbase.bucketcache.ioengine ?=?heap? hbase.bucketcache.size ?=?0.4?–? 作为介质缓存(SSD/FIO)，增大缓存空间??hbase.bucketcache.ioengine ?=??le:/ssd0/? hbase/cache0.data,/ssd1/hbase/cache0.data,/ssd2/hbase/binedcache ?=?false基于业务的改进与优化?? 混合存储?–? SATA与SSD折衷，IOPS与成本之间的平衡?–? 无命中率可言?–? 定制