华为FusionStorage3.30高层主打胶片浅析.pptxVIP

随需而动的大存储资源池 --华为FusionStorage分布式存储系统  目 录 存储业界变革趋势 FusionStorage，引领存储新革命 成功案例 1 2 3 1980s 个人电脑 1960s 大型机 1990s 互联网 2000s 移动互联网 2010s 大数据，云计算 IBM DS8000 EMC VMAX Huawei 18000 1956: IBM RAMAC 305 世界第一台磁盘存储系统 磁盘介质取代打孔卡， 容量5MB读写速率10K/s 信息化与存储发展历程 Google FS 亚马逊 S3 1993： EMC Symmetrix 16MB DRAM, 1 GB Global Memory,容量1TB 超融合架构 以主机和终端、DAS为主 GB时代，MB/s IAAS 1.0 企业信息化面临的存储挑战 TOP 6问题：容量/管理/TCO/性能/大数据/利用率 *数据来源：中桥国际调研咨询有限公司 50.1% 44.4% 40.2% 39.3% 33.2% 20.9% 3.1% 容量不足， 经常需要扩容 “It is data center that managing me, not I am managing it.” 管理复杂， 需要专业人员 TCO持续上升，部分设备扩容成本比新购还高 性能无法满足业务要求，需要购置新设备，原投资浪费 对云计算、大数据等新技术支持不足 资源孤岛，无法共享，利用率低下 “业务发展快，数据量增长更快！” “3年前的型号厂商说停产了，建议我们买新型号。问题是数据迁移太痛苦！” “现在业务都上云了，要给上千个虚机配存储资源至少要花两天！” “各个部门都说资源不够用，但实际上很多是可以共享使用的，特别是研发，但是我们很难都监控起来” “如果一套存储可以一直扩展下去那样就好了！” Facebook每天20亿照片存储系统揭秘 应用推出快。每天上线140，已达24000 应用更新淘汰率高 活动用户0到1亿55月，1亿到4亿18个月 元数据与图片数据绑定 NAS元数据超大（26T=2600亿*100字节)，无法缓存到内存。 检索单个图片超过10次磁盘IO。 NAS服务器成本高昂 元数据与图片数据分离 Haystack目录元数据大幅减小（3.5T =2600亿*50字节*1/4)可缓存内存中 检索单个图片数据仅需1次磁盘IO。 商用服务器承载存储，每TB成本降低28% 2600亿图片（20P）时，NAS层出现性能瓶颈，无法满足每秒查询1百万图片的需求。 爆发增长带来海量数据，推动IT系统改造 业务特点 NAS无法满足海量照片存储 自研分布式存储 目前每天新增照片20亿，每秒查询最高4百万图片 历史照访问片符合长尾理论 分布式Server SAN的架构 Server本地存储 Server Server Server SAN/NAS SAN/NAS VM VM VM VM 传统SAN的架构 FC/IP Network FC/IP Network VM VM VM VM Cache Cache 架构转型 InfiniBand /10GE Network 传统架构亟需转变 以计算为中心的Scale-Up架构 以数据为中心Scale-Out架构 Server1 VBS Server2 VBS Server N VBS 存储服务器 OSD OSD OSD … … 存储服务器 OSD OSD OSD … … 存储服务器 OSD OSD OSD … … Cache Cache Cache VM VM VM VM VM VM 孤立的存储资源 存储设备只能扩展容量 共享式的存储资源池 性能与容量横向扩展 全球存储市场发展趋势：分布式存储快速增长 专有设备变通用设备 计算与存储线性扩展 简单管理、低TCO 未来10年全球企业分布式存储市场快速增长，预计2027将占存储市场的70%份额 定义：Server SAN 是由多个独立的服务器自带的存储组成的一个存储资源池，同时融合了计算和存储资源 目 录 业务云化关键诉求及存储变革趋势 FusionStorage，引领存储新革命 成功案例 1 2 3 FusionStorage，引领存储新革命 应云而生 资源按需获取 存储跨域流动 容忍双点故障 面向未来 业务加速、灵活简洁、运维简单 49152 硬盘 4096 节点 128 存储池 10240 主机接入 高效可靠 千万级IOPS 重构1T30分钟 亚健康检查 资源如水，随需而动 资源共享 按需扩容 应云而生 稳定可靠 跨域流动 高效可靠 面向未来 应云而生 1个开放平台代替多套封闭设备 50TB 10K IOPS 100TB 30K IOPS 200TB 60