华为OceanStor9000技术主打胶片.pptxVIP

OceanStor 9000大数据存储系统主打胶片 融合扩展 简单高效目 录1知易行难，大数据的挑战2打破陈规，华为应对之道3真知灼见，行业深度剖析4行以见效，华为应用实践什么是大数据每分钟290万封邮件终端用户每天产生数十TB日志数据视频网站每天上传百TB数据Volume：数据量巨大集中储存/集中计算已经无法处理巨大的数据量 结构化数据Variety：种类和来源多样化非结构化数据年增长率 日志/图片/视频/文档/地理位置 … 80%60%40%20%0%63% 32% 社交网络快速分析用户行为，实现精准营销电子商务实施翻译，以促成订单，增强用户黏性Velocity：分析处理速度快非结构化数据结构化数据移动互联网广告迅速调整，实现对于广告需求的精确满足 海量数据的及时有效分析 物联网日本大地震后9分钟发出海啸预警Value：价值密度低，商业价值高大量的不相关信息进行复杂深度分析，深挖价值Source: IDC知易行难，大数据的挑战一…业务1业务3业务2云化IT系统服务器服务器服务器服务器服务器服务器服务器网络网络网络 …存储存储存储网络网络网络网络并行运算、云计算带来的性能扩展问题容量扩展和信息孤岛的问题带来管理池化的需求扩容、维护工程的复杂性带来的管理问题存储存储存储存储传统技术面临大数据的扩展困境知易行难，大数据的挑战二性能成本大数据处理中需要高性能系统的支撑，而性能的提升往往带来成本的压力数据按照热、温、冷分级管理，带来数据割裂，自动化程度低，数据迁移代价高，时效性差，管理复杂传统技术面临大数据生命周期管理的挑战知易行难，大数据的挑战三NAS非结构化数据分析数据导入orNASSANSAN结构化分析结果中间数据数据源结构化非结构化分析系统存储系统存储和分析系统分离，需要大规模数据迁移和装载，降低处理效率对于结构化与非结构化数据的处理需要采用分离式系统，购置多套设备，分散管理传统技术面临多种数据类型的挑战目 录1知易行难，大数据的挑战2打破陈规，华为应对之道3真知灼见，行业深度剖析4行以见效，华为应用实践OceanStor 9000—专为大数据设计的存储系统以融合替代割裂 以融合的系统架构替代高代价的数据迁移以规则应对不规则 以规则的横向扩展应对不可预期的数据增量以简单化解繁琐 以极简的配置部署化解繁琐的系统管理OceanStor 9000大数据存储OceanStor 9000存储系统架构与Hadoop生态系统对接备份、归档软件媒体与娱乐视频监控HPC精准营销商业推广应用层备份、归档数据分析文件存储HDFSNDMPNFSJDBCCIFSODBCFTP分布式数据库OceanStor DFS(WushanFS)数据处理层InfoTier(动态分级)InfoAllocator(配额)InfoLocker(WORM)InfoStamper(快照）SecureVideo（视频图像修复）InfoReplicator(远程复制)P系列节点C系列节点I系列节点硬件节点层业界最大的扩展能力系统容量 业界第一288节点华为VS业界最高1.2倍60PB50PB(EMC isilon)…扩展能力 业界第一华为VS业界最高2倍60PB288个144个(EMC isilon)容量容量OceanStor 9000关键能力-简单传统NAS存储OceanStor 9000管理不同文件系统100TB管理单一文件系统60PB安装（11步）扩展（9步）管理（7步）上架及连线上架及连线管理HBA配置HBA规划RAID管理RAID，热备盘规划RAID，热备盘配置RAID，热备盘管理LUN配置RAID，热备盘规划LUN，热备盘管理文件系统规划LUN配置LUN创建目录配置LUN格式化卷数据共享格式化卷安装文件系统调整各FS数据量安装文件系统数据共享网络配置调整各FS数据量数据共享调整各FS数据量安装（4步）扩展（2步）管理（2步）上架及连线上架及连线创建目录网络配置点击扩容按钮数据共享创建目录数据共享简单简单复杂复杂夯实的基础架构控制器存储节点硬盘框Scale-up架构专用硬件后端SAS专用网络Scale-out架构X86通用硬件全IP组网全分布式架构，高可靠数据保护InfoProtector以热备容量替代专门独立热备盘以数据重构替代磁盘重构数据恢复速度1TB/h，是传统RAID的10倍减少维护错误，降低误操作风险+1+2传统RAID5传统RAID6分布式Erasure Code硬盘故障容忍数1241TB 数据恢复时间9.5小时10小时1小时+3+4自动访问负载均衡，无需人工干预InfoEqualizerCPU利用率多种均衡策略，灵活匹配各种业务模型性能自动均衡，消除热点，资源利用最大化单节点扩容60秒完成节点综合负载节点连接数轮询节点吞吐量多种分级策略，多样化策略