The Study of Cloud Storage System.pdfVIP

Computer Science and Application 计算机科学与应用, 2014, 4, 333-343 Published Online December 2014 in Hans. /journal/csa /10.12677/csa.2014.412045 The Study of Cloud Storage System Based on Object-Based Storage Shouxin Cao, Liutao Zhao, Yi Jin Beijing Computing Center, Beijing Email: caosx@, zhaolt@, jinyi@ th th th Received: Oct. 28 , 2014; revised: Nov. 29 , 2014; accepted: Dec. 7 , 2014 Copyright © 2014 by authors and Hans Publishers Inc. This work is licensed under the Creative Commons Attribution International License (CC BY). /licenses/by/4.0/ Abstract This paper mainly introduces the key technology of cloud storage system which is based on an open source technology. The system is based on object-based storage technology, and uses consis- tent hashing algorithm, eventual consistency and other technologies. In addition, it is compatible with Amazon S3 through its API, and it is usually highly available, simple operation, easy expan- sion and high fault tolerance. Keywords Cloud Storage, Object-Based Storage, Consistent Hashing, Amazon S3 基于对象存储的云存储系统研究 曹守欣，赵琉涛，金 翊 北京市计算中心，北京 Email: caosx@, zhaolt@, jinyi@ 收稿日期：2014年10月28 日；修回日期：2014年11月29 日；录用日期：2014年12月7 日 摘 要 本文主要介绍基于开源技术的云存储系统关键技术，系统基于对象存储技术，采用一致性哈希算法、最 333 基于对象存储的云存储系统研究 终一致性等技术，并提供兼容Amazon S3 的API ，其具有高可用、操作简单、易扩展，容错性高等特点。 关键词 云存储，对象存储，一致性哈希，Amazon S3 1. 引言 在将数据存储到物理设备上时，前端数据库首先需要对数据进行持久化操作。在过去几年，关系型 数据库一直是数据持久化的唯一选择，数据工作者考虑的也只是在这些传统数据库中做筛选，比如SQL Server、Oracle 或者是MySQL 。甚至是做一些默认的选择，比如使用.NET 的一般会选择SQL Server；使 用Java 的可能会偏向Oracle，Ruby 是MySQL ，Python 则是PostgreSQL 或MySQL 等等。原因很简单： 过去很长一段时间内，关系数据库的健壮性已经在多数应用程序中得到证实。我们可以使用这些传统数