基于Swift的可去重校园云存储系统的设计与实现-论文.pdfVIP

科研信息化技术与应用 2013，4(4)：42—51 技术 ／TECHNOLOGY 基于Swift的可去重 校园云存储系统的设计与实现 孟海燕’，徐兵 ，李京 1．中国科学技术大学计算机科学与技术学院，安徽 合肥 230026 2．中国科学技术大学网络信息中心，安徽 合肥 230026 摘 要： 随着高校信息化的发展以及教学、科研和管理应用系统的广泛应用，数据资源如：图片、文档、视 频等非结构化资源增长十分迅速。如何应对校园网络环境 中不断增大的存储需求，提高存储资源的 利用效率，是校园数据中心运维中一个比较重要的问题。本文介绍了基于开源软件 Swift的云存储平 台的搭建，以及带有重复数据删除功能的校园云存储系统 D【edupe_swift)的设计与实现。通过重复 数据删除功能的引入，提高了底层存储空问利用率；采用源端去重机制 ，为用户缩短 了重复文件的 上传时间：通过welb服务将存储作为服务提供给用户，为用户提供 良好的云存储访问体验。 关键词： 重复数据删除；源端去重；云存储；分布式存储系统 A DeduplicationCampus--basedCloudStorageSystem Based onSwift M engHaiyan，XuBing2LiJing ， J．SchoolofComputerScienceandTechnology,UniversityofScienceandTechnologyofChina，Hefei，Anhui23002 China 2．NetworkInformationCenter,UniversityofScienceandTechnologyofChina，Hefei,Anhui230026,China Abstract： Asthedevelopmentofcollegeinformationconstructionandthewideusageofapplicationsystemsfor teaching，researchandmanagement，thevolumesofdataresources，suchasimages，documentsand videos．aregrowingveryfast．Howtostoretheincreasingdataandtoimprovetheutilizationrateofstored resources．hasbecomeanimportantproblem tothecampusnetworkenvironment．Thispaperintroduces thedeploymentofacloudstorageplatfomr basedontheopen-sourcesoftware，Swift，andpresentsthe 42 孟海燕 等：基于Swift的可去重校园云存储系统的设计与实现 designandimplementationofacampus—basedsource-deduplicationcloudstoragesystem，DedupeSwift． _ Itcarlimprovetheutilizationrateofunderlyingstoragespacethroughdeduplicationmechanism；shorten hteuploadtimeofduplicatefilesthroughhteintroductionofsourcededuplication，andprovideconvenient accessexperienceforhteusersthroughwebservice． Keywords： deduplication；sourcededuplic