大数据和硬件教程范本.ppt

1 大数据硬件技术 2 大数据和硬件 基于大容量、高密度的SATA硬盘 通过hadoop等开源软件构建分布式文件系统 提供POSIX化的API接口构建大数据处理平台 将计算能力和存储能力结合在一起的存储服务器 3 大数据处理的数据库平台 特别是分析挖掘类应用已经逐步走向列型数据库，而不再是传统关系性数据库的行型数据库。 比如Sybase IQ就是一种高性能列数据库，适合OLAP（联机分析处理）应用，具有较强的扩展性。 硬件架构上一般采用高性能磁阵加高密度服务器阵列方式组建。 4 大数据应用模型硬件方案 经过软硬件整合的大数据处理平台，诞生一体机的硬件形态。比如Oracle公司的Exadata、IBM的Netezza 另外一种一体机形式则采用了硬件定制化方式，也有较大的市场空间，就是SAP公司的HANA数据库。 5 现状及未来 大数据是一种以数据为中心的数据密集型技术，现有的以计算为中心的技术难以满足其需求。 目前对大数据处理的优化都是基于传统的内存-磁盘访问模式，数据处理的关键“数据I/O瓶颈”一直存在。 未来随着硬件新器件和新材料的发展，如相变材料、阻性RAM等逐步成熟商用，将使内存容量大、速度快且不再挥发，基于内存计算的大数据处理技术将蓬勃兴起。 6 数据中心存储技术的演变之路 传统的直接连接存储(DAS)比较简单，只运行内部需要的任务 后来慢慢变成了笨重、庞大、