Redis基于RDB+AOF的数据恢复策略研究.docVIP

Redis基于RDB+AOF的数据恢复策略研究 摘要：该文针对Redis数据库中两个问题，RDB（Snapshot）恢复数据不完整和AOF（Append Only File）恢复速度慢，提出了RDB+AOF的数据恢复方案。该方案借鉴检查点思想，依赖RDB和AOF两种方法，不但具有AOF恢复数据全面的特点，又兼具RDB恢复速度快的优势。按照此方案修改Redis源码并作对照实验，结果证明该方案可行且有效。 关键词：Redis；数据恢复；检查点；RDB+AOF 中图分类号：TP391 文献标识码：A 文章编号：1009-3044（2016）14-0007-04 Research on a Data Recovery Strategy Based on RDB and AOF in Redis ZHANG Wen-shuai （School of Mechanical Electronic and Information， China University of Ming and Technology（Beijing）， Beijing 100083， China） Abstract： This paper in order to solve two problems in Redis database，one is that the restored data is not complete through RDB（Snapshot），the orther is the speed is slow through AOF（Append Only File），put forword a data recovery method which combined RDB with AOF.The scheme， which is used checkpoint for reference， depends on the two methods of RDB and AOF， which not only has the characteristics of comprehensive recovery like AOF， but also has the advantage of rapid recovery like RDB.In accordance with this program to modify the Redis source code and do a control experiment， the results show that the program is feasible and effective. Key words： Redis； data recovery； checkpoint； RDB+AOF 数据库技术的发展，带动了NoSQL（非关系数据库）的崛起，其中Redis（REmote DIctionary Server）数据库因其高效性得到广泛应用。它是一个用C语言编写的开源的内存数据库，支持数据持久化。 持久化是内存数据库数据恢复的前提。Redis支持两种数据持久化方法：一种是RDB，能周期性地对数据库做快照并写入磁盘。RDB恢复速度较快，但两次快照期间的数据都会丢失；另一种是AOF，将每次写操作都记录日志，并定期写入磁盘。AOF恢复速度较慢，但能恢复全部数据，不会造成数据丢失的现象。 本文通过分析RDB和AOF的原理和特点，结合多种数据库在数据恢复技术方面的方法和经验，提出了一种RDB+AOF相结合的方案，该方案将解决RDB恢复数据不完整和AOF恢复速度慢的缺点，对于Redis能够完整快速恢复数据具有很重要的实用意义。 1 数据库恢复技术概述 1.1 关系数据库恢复技术 关系数据库恢复技术主要有数据转储和登录日志文件两种，为了维护事务的特性，必须使用日志方式，以便数据恢复时可以进行相应的redo（重做）和undo（撤销）操作，维持事务一致性。为了解决日志恢复速度慢的缺陷，关系数据库在日志基础上发展了检查点技术。 传统日志恢复方法需要遍历整个日志文件，且要重新执行所有操作，这将造成很多时间浪费，为此发展了检查点技术。该技术在日志文件中增加检查点，检查点是这个时刻数据库的一致性备份，再增加一个重新开始文件，用于记录检查点在日志文件中的地址，数据恢复时从重新开始文件找到某个检查点在日志文件中的地址，并从日志中找到这个检查点开始数据恢复，节省了遍历日志和重复操作的时间和资源。 检查点技术对事务的恢复工作可分为以下三种情况[1]： （1）在检查点之前完成的事务，更新已经写到数据库中，不需要再重做； （2）检查点之后、故障点之前完成的事务，虽然事务已结束，但它们对数据库的修改可能还未来得及写到磁盘上，必须要重做；