一个多线程分布式备份系统的设计和实现.pdfVIP

一个多线程分布式备份系统的设计与实现 马坤 济南大学 信息科学与工程学院,山东济南 250022 E-mail：heaven888888@ 摘 要：本文阐述了基于三层架构的一套备份系统的设计及实现，分别设计了 C/S 结构的多 线程分布式备份agent 和B/S 结构的备份系统WEB 管理，对目前的远程主机文件备份提出了 一个解决方案。 关键词：备份,多线程，分布式 1 引言 随着互联网的迅速扩展，人们可以使用网络进行办公、学习。一个学校或企业拥有大量 的网站或其它基于WEB 的应用，像 Email、Ftp 、数据库等。但是如何管理这些应用，如何备 份这些内容成为人们关心的焦点。本文就介绍一个多线程备份系统的实现。 2 相关技术概述 2.1 多线程技术 由于多线程应用程序将程序划分成独立的任务，因此可以在以下方面显著提高性能：多 线程技术使程序的响应速度更快，因为用户界面可以在进行其他工作的同时一直处于活动状 态；当前没有进行处理的任务可以将处理器时间让给其他任务；占用大量处理时间的任务可 以定期将处理器时间让给其他任务；可以随时停止任务；可以分别设置各个任务的优先级以 优化性能。[1] 备份系统耗时并大量占用处理器，使用多线程可以大大提高备份效率。 2.2 自动化任务实现 在Unix或Linux操作系统中，任务可以被配置在指定的时间段、指定的日期、或系统平均 载量低于指定的数量时 自动运行。系统管理员可使用自动化的任务来执行定期备份、监控系 统、运行定制脚本等等。cron 是一个可以用来根据时间、日期、月份、星期的组合来调度对 重复任务的执行的守护进程[2] 。cron 假定系统持续运行。如果当某任务被调度时系统不在运 行，该任务就不会被执行。利用Crond服务就可以定时执行某段程序，完成某种特定任务。具 体将配置” /etc/crontab”文件。 在 Windows 操作系统中，通过使用任务计划，您可以安排任何脚本、程序或文档在最方 便的时候运行，从而完成某种特定任务。具体可在“控制面板”中的“任务计划”中设置。 3 系统开发与设计 3.1 系统架构 本系统包括 C/S 结构的多线程分布式备份系统和 B/S 结构的备份系统 WEB 管理。C/S 结 - 1 - 构的多线程分布式备份系统的主要功能为：每一台要备份的客户机可以定时的去检测数据库 服务器中的备份任务，若有则按照任务和数据库中该客户机的备份参数（包括备份到的 FTP 服务器位置、备份时间等），将本机的部分文件经过 tar 打包后通过 FTP 传送到对应 FTP 服务 器中，从而完成备份任务。每个备份任务建立一个线程。B/S 结构的备份系统 WEB 管理的主 要功能为：完成对备份机群、备份任务、备份文件 FTP 服务器等参数的设置和管理，查看系 统备份和管理日志，使用 WEB 界面的FTP,SSH,远程桌面客户端对远程机器的管理。 图3-1 系统架构 3.2 C/S 模式的备份机器客户端设计 备份机器上设计一个 client agent,该程序定时查询数据库服务器，检查是否有备份任务。 定时查询，若是 Windows,则用计划任务实现；若是 Unix 或 Linux 可用 Crond 服务来实现。 为了实现跨操作系统平台和多线程，备份客户端用Java实现，程序框图如图 3-2 。在客户 机上定时执行守护进程，该进程会检查数据库，若有备份任务，则会创建一个Task备份线程， 该线程将备份的目录或文件进行打包（Linux下则使用tar命令，Windows使用tar.exe ），然后根 据数据库的设置，将打包文件通过FTP( 由JAVA封装的FTP类[3]来实现)传送到对应的FTP服务 器。 其 中 类 ThreadedBackup.agent.T