面向并行备份数据流的数据快速存储方法.pdfVIP

3946 2010，31(18) 计算机工程与设计 ComputerEngineeringandDesign ·网络与通信技术 · 面向并行备份数据流的数据快速存储方法 宁 静 ， 胡晓勤， 汤晓迪 (四川大学 计算机学院，四川 成都 610065) 摘 要：在大规模数据服务应用中，尤其是备份与共享系统中，服务器往往会面临大量的上行数据流，而对这些数据的处理 需要进行频繁的写操作，由于服务器数据存储位置的随机性，在多用户多任务环境下磁盘性能大大降低。传统的缓存技术 只是针对小范围数据的局部性进行优化，对于并行备份数据流的效果不好，因此提 出一种数据缓冲方法，通过数据封装，对 上行数据流进行整理，动态调整 10次序 ，实现异步的数据处理接 口，提高了文件服务器的存储性能。 关键词：数据缓冲；上行数据流；远程备份；异步存储；文件服务器 中图法分类号：TP309．3 文献标识码：A 文章编号：1000—7024(2OLO)18—3946—04 Fastdatastoringmethodforparallelbackupdatastream NING Jing． HUXiao—qin． TANGXiao—di (SchoolofComputer,SichuanUniversity,Chengdu610065，China) Abstract：Inthelarge—scaledataserviceapplications，particularlybackupandfile—sharingsystems，theserveroftenfacealargenumber ofuplinkdaat stream．Inamulti-userenvironment，theprocessingofdatarequiresfrequentwriteoperations．Duetotherandomness ofdatastorelocations．diskperformnacereducedgreatly．Thepurposeofthertaditionalbufferingtechnologyisoptimizingstorageac- cordingtoad talocality．Butit’Snotefficientforpraallelbackupdatasrteam．Soadatabufferingmethodispresentde ，whichrearrange hteadtasrteamnaddynamicallyadjusttheIOordertoimplementasnychronousdaatprocessinginterface，andimprovethestorageper- formnaceofthefileserver． Keywords：databuffering；uplinkdatasffeam；remotebackup；asynchronousstorage；fileserver 针对上述 问题，提出了一种数据缓冲方法，在备份服务器 O 引 言 上使用一个高速缓冲器对备份数据流进行整理，以缓解并发 面 向下行数据流 的文件服务 已发展相当成熟，有大量 的 数据率大于 10处理速度的问题。高速缓冲越大，支持的并发 协议和工具提供数据下载功能，文件恢复数据流也有了完善 访 问数就越多，因此进行合理的设置可以充分发掘服务器大 的控制方法 “，而在上行数据为主的文件备份服务中，用户上 内存、多处理器带来的性能提升潜力。 传数据量大，数据往往需要进行存储，由于多个用户共享网络 1 文件高速缓冲方法 带宽，多个上行数据流 同时到达服务器 ，得到的数据块往往是 零散的，而且各个用户 的存储位置不 同，导致每次存储数据量 1．1 文件缓冲模块结构 小，并且位置趋 向随机化 ，磁盘寻道时间致使磁盘性能大大降