中国优秀云计算方案征集函.doc

互联网行业云存储解决方案 来源：龙存科技 方案名称： 互联网行业云存储解决方案 针对行业： 互联网 方案概述： 互联网行业存储面对的挑战： 海量数目的小文件； 迅速增加的数据量； 数据的高互动性； Cache的低命中率； 龙存方案： 龙存集群存储系统是一款针对海量数据存储应用的大规模通用文件共享的集群存储系统。采用通用设备为构建单元，为用户提供统全局统一的文件系统映像和完全与本地磁盘兼容的访问接口。为用户彻底解决海量小文件存储难题。 方案特性： 海量小文件的高效管理；系统采用元数据服务器集群技术和优化的Cache算法，可高效管理千亿级文件。 强大的文件检索能力：单目录存放千万级文件时，检索速度任达到几万每秒。 数百PB的存储空间和线性扩展能力：系统容量可扩展至数百PB，系统聚合带宽随节点的增加而线性提升。 数据高可靠性：无任何单点故障， 成本可控：系统按需初始投入，按需动态扩展。 成功案例： 人人网、搜狐网 方案详述： 一、互联网行业背景 无论是传统的门户、搜索、视频类网站，还是新兴的博客、社区、交友等WEB2.0网站，又或是CDN供应商都面临着业务飞速增长，数据急剧膨胀的压力。 数目庞大的小文件：每天所产生上百万个图片、FLASH、文章等大约几十KB的小文件将会给存储系统带来巨大的压力。现有存储系统对高达上亿数量文件的检索速度往往难以令人满意，并且由于单目录下文件数量的限制，文件的管理也极为困难。 迅速增加的数据量：随着WEB2.0 应用用户的增多，数据呈爆炸性增长，存储系统如果没有灵活的可扩展性，存储平台的添加和管理将会变的异常困难。 高互动性：负责流媒体文件的内容交付式网络需要提供文件快速交付，用户绝不会容忍缓慢的视频播放、暂停缓冲或网站中断。研究表明，网络用户能够承受等待信息检索的时间是2秒！ Cache 命中率低：用户为了提高应用对文件的访问效率，往往会在前端配置一个稍大容量的缓存。但由于小文件的数量极其庞大，应用对这些文件访问的随机性非常高，使得Cache命中率极低，缓存失去了应有的作用，导致应用需要直接到后端存储系统上读取数据，给存储系统带来了极大的压力。 三、龙存解决方案 龙存集群存储系统（以下简称LoongStore）是一款针对海量数据存储应用而设计的大规模通用文件共享集群存储系统，采用通用的硬件设备作为构建单元，为应用提供全局统一的文件系统映像和完全与本地磁盘兼容的访问接口。 LoongStore为用户彻底解决了海量小文件存储的难题，凭借领先的技术优势为WEB2.0 应用提供高性能、高可靠的存储系统，帮助企业提升竞争力。LoongStore系统采用集群化的结构提供了简单的管理方式，并支持动态在线扩容；对外提供单一的系统映像，可以做到真正按需购买，随时扩容，节约了用户的一次性投资。 近乎无限的海量文件管理和极高的文件检索效率 LoongStore拥有高效率的多元数据服务器集群技术和高效的海量文件检索技术，在存放上百亿文件的同时保持极高的文件检索效率。LoongStore是目前业界唯一一款能够在单个目录下高效管理上千万个文件的存储系统，在单目录下存放上千万数量文件时，仍然能够提供每秒数万的文件检索效率。 在实际使用中，用户可以使用层次简单的目录结构存放大量的文件，即使在前端的Cache 命中率极低的情况下，应用也能够快速的从后端存储系统上读取数据。LoongStore的该项特点加速了数据密集型应用的数据交付。 PB级容量的单一文件系统 LoongStore在单一文件系统下可轻易扩展到64PB，扩展的过程中可以保持高性能和高可靠性。单一的文件系统降低了管理维护的复杂度，提高了生产效率。 高IO吞吐量 LoongStore可以帮助互联网公司消除信息孤岛，所有的数据都存放在单一的文件系统下面，对外提供极高的访问速度。LoongStore采用了带外的元数据管理方式，并且利用分布式的存储和分布式的访问技术，计算节点到智能存储节点之间实现高效率的直接数据访问。LoongStore系统所提供的数据IO性能几乎就是每台智能存储节点性能相加的总和，可轻松提供GB/s级的IO吞吐量。 灵活的扩展性 LoongStore支持动态在线扩容，可以动态的添加单块磁盘或单台智能存储节点，扩展过程中无须终止当前业务，新增容量即插即用。扩容之后，管理员可以在适当的时机启动负载均衡，使数据平均分配到各个智能存储节点。负载均衡过程同时兼顾数据的活跃性，使得负载均衡结束后热点数据也能够均衡的分布在各个智能存储节点上，提高系统的整体效率，达到性能线性增长的效果。 灵活的在线硬件更新替换 LoongStore采用了高效的全系统规模数据高可用技术，彻底消除存储系统中的单点故障，确保用户的应用持续稳定地运行。LoongStore采取了全局冗余机