- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
数据库备份研究和实现
数据库备份研究和实现
摘 要:数据库备份是数据库运维工作中一项重要的工作,关系着系统安全,业务稳定。文章查阅了行业内的数据库备份的方法,面向校园应用这一应用场景,提出了新的解决方案,介绍了相关实现。
关键词:数据库备份;运维;校园信息化
中图分类号:G250.74 文献标志码:A 文章编号:2095-2945(2017)30-0195-02
1 现状描述
大学校园中的软件系统,以上海立信会计金融学院为例,主要是面向院系、部门的业务系统,关系着校园的正常运行。各个系统所产生的数据,大多都存储于各系统的数据库中。这些数据库多是关系型数据库,多数没有做数据安全方面的备份。校园业务系统在建设时,并没有完整的数据备份策略,一旦发生系统故障,数据丢失后难以恢复。面对着硬件故障、病毒入侵、人为误操作、停电等多种可能导致数据丢失的问题,我校信息办着手统一的问题解决方法。面对数量繁多、类型多样的数据库,力争以通用的方案,获取基本的数据安全保证。
2 基本解决方法
面对缺乏数据备份的众多数据库,我们希望在发生数据丢失时,能够从使用日常备份中恢复数据,最大限度减少损失。故障恢复流程,时间希望能够控制在小时之内,对于校园应用系统这是能够接受的。
我们研究了多种数据库备份的方法, 在本篇中由于业务需求,我们关注了目前的几种主流的备份方式,这些备份方法主要工作在四个层面上:
(1)文件层:将数据库导出成文件格式,之后再围绕文件来做备份。如文献[1][2][3]都通过远程数据传输软件来实现备份文件格式数据的迁移汇总。这种类型的备份方法通过使用数据库工具定时导出数据(Oracle的Rman、MS SQL Server的数据库作业)来实现数据库的导出,再使用文件同步工具如Rsync将数据库数据文件、日志文件等同步到备份服务器。这种方法部署、实现简单,可快速实现数据的备份。
(2)应用层数据备份:通过数据库备份工具来完成数据库的备份[4][5]。这类备份软件如开源数据备份软件BackupPC、Amanda、Bacula等。其中BackupPC具有B/S架构,备份数据方式灵活、支持重复数据删除功能等特点[5]。文献[4]表明开源软件Amanda完全能够满足GB级的数据备份需求,但系统不够轻量化。
(3)虚拟机层数据备份:通过备份虚拟机的同时、实现对虚拟机上数据库的备份。这类方法都在虚拟机管理平台实现,其特点是操作简单,容易恢复,快速切换。但同时代价也是明显的:操作系统及数据库软件等软件占据很大比例的虚拟服务器磁盘。因此备份的磁盘使用率较低,而不同备份之间的差异较小,备份时更加增加了存储空间、网络的消耗。若是使用增量备份,如快照等,又会存在恢复困难甚至可能难以恢复。
(4)数据层数据备份:通过云平台远程备份数据库。文献[6]使用了AWS这一存储平台来存储数据。但校园应用系统如一卡通系统、学生信息系统中有很多隐私信息,将数据存放于云端,信息安全可能成为隐患。
对比不同类别的备份系统之后,我们决定在数据层进行数据备份的开发。通过各类数据库接口直接读取数据库中的数据,定期将数据库中的数据保存为格式化的文件格式,用以恢复。在系统设计时,就注意操作简单,易于配置,便于管理等特点。
3 创造性地实现数据备份
面对运行于不同平台、类型众多的数据库,统一而通用的备份方式是最佳选择。因此,我们提出的使用众多SQL/NoSQL数据库接口直接备份数据的方案。这种备份方法具有部署简单、备份运行稳定、恢复快速等优点。其结构如图1所示。
数据库备份系统采用Python语言开发,在读取数据库配置之后,通过Python的众多数据库API实现对不同数据库数据的直接读取。读取数据库服务器中的数据库列表、表结构,并实现定期备份数据是本系统的核心。已知的Python数据库接口支持众多关系数据库包括SQL server, Oracle, Mysql,也支持众多NoSQL数据库如MongoDB,Redis等,而且,此类数据库接口还在不断地开发中,因而本系统具有良好的拓展性。直接读取数据库数据,摆脱了操作系统的限制,具有跨平台、跨数据库的优势,数据备份的配置也变得及其简单。
系统建设中首先读取数据库的表列表及表结构描述,SQL Server,Oracle,Mysql这几个数据?斐?商都能够通过SQL语句读取相关数据,其中MySQL可以获取表创建时的SQL语句。其次,不同数据库厂商的数据类型不同。同样是二进制对象,例如MS SQL中的Image图片格式,而Oracle中则是BLOB类型。这些不同类型的数据通过转换之后,都能够统一到字符格式。值得一提的是使用Cx_oracle读取Oracle的BLOB格式数据的问
原创力文档


文档评论(0)