通过rsync远程增量备份您的数据
作者 佚名技术
来源 Linux系统
浏览
发布时间 2012-04-22
| 备份是写代码的人必不可少的一项工作,传统的备份,一般就是copy所有数据到一个地方,然后贴上标签,表示是什么时候备份的,这种备份被称之为“整体备份”.如果经常进行整体备份,对磁盘的空间占用需求就很大,尤其当你备份大容量的数据的时候,有时候,比如一个星期,只对其中一小部分的内容进行了修改,但是还是需要全部重新备份一次,很显然,太浪费磁盘空间了；此时增量备份就派上用场了,增量备份,又叫做差异备份,意如其名,只备份修改过的部分.好了,废话说完了,来看看如何实际操作,我们用到的软件是大名鼎鼎的 rsync,很多网站的镜像就是用它来完成的. ==================================环境介绍：================================== 备份服务器： 192.168.10.3 需要备份的目录：/var/www 备份时验证用户名和密码： backup/secret 备份客户机(备份数据存放地)：192.168.10.4 客户机和服务器均需安装 rsync 软件包 ===================================服务器端配置：===================================1、安装 使用系统自带的rsync工具,插入系统启动光盘,通过rpm安装rsync工具. 若采用采用源码包安装,就是经典的编译三步曲 2、创建主配置文件 # vi /etc/rsyncd.conf ## file of /etc/rsyncd.confmotd file=/var/rsync/welcome.msgpid file = /var/rsync/rsyncd.pidlock file = /var/rsync/rsync.locklog file = /var/rsync/rsyncd.log ### 需要备份的模块[www]# 模块名后面会用到comment = bbspath = /var/www/use chroot = nomax connections = 4read only = yeslist = falseuid = nobodygid = nobodysecrets file = /etc/rsyncd.secretshosts allow = 192.168.10.4hosts deny = 0.0.0.0/0ignore errors = yestransfer logging = yeslog format = "%a %f %l"auth users = backup 上面定义了1个备份点,只允许 192.168.10.4 连接,需要验证的用户名为 backup然后创建密码文件,每一行格式为： 用户名:密码,都是明文的 # vi /etc/rsyncd.secretsbackup:123456# chmod 600 /etc/rsyncd.secrets 创建日志或运行目录 # mkdir /var/rsync 3、启动服务# rsync --daemon 4、编辑/etc/xinetd.d/rsync (可选步骤) rsync服务的监听由xinet来统一分配 service rsync { disable = no #将此项改为no socket_type = stream wait = no user = root server = /usr/bin/rsync server_args = --daemon log_on_failure = USERID} 重启xinetd以启动rsync服务 # service xinetd restart 5、检查rsync时候启动# ps -ef | grep rsync 6、停止服务# kill `cat /var/rsync/rsyncd.pid` ====================客户端的配置====================(1)主服务器向备份服务器备份# rsync -vzrtopg --delete --progress backup@192.168.10.3::www /back (2)备份服务器的恢复(主服务器read only = no)# rsync -vzrtopg --delete --progress /back backup@192.168.10.3::www (3)增量备份(主要用这个) 备份要求: 所有的数据统一放到一个根目录下,主备份用每个备份点名字命名,增量备份目录为 increment,每个备份点的增量备份数据,全部放到这个目录下面,目录为当前日期,格式为 2007-08-11_11-22文件目录树如下：/var/backup/ 备份根目录 |---www/ 备份点1的主目录,这个目录里面的数据是备份完成后最新的 |---increment/ 增量备份根目录 |--- www/ 备份点1的差异/修改备份数据 |--- 2009-12-04_10-22 从最开始备份到08月11日10点22分,所修改的数据 |--- 2009-12-05_11-22 从10点22分到11点22分,所修改过的数据 准备工作:创建备份根目录: mkdir /var/backup,其他的目录备份时会自动被创建 使用系统自带的rsync工具,插入系统启动光盘,通过rpm安装rsync工具 # echo "secret" > /etc/rsyncd.conf 注意,这里不同于server端,这里只写密码即可 # chmod 600 /etc/rsyncd.conf 客户端基本不用配置什么文件.一个脚本就OK了. # vi /etc/rc.d/init.d/rsync.sh #!/bin/bashunset verb progressfor i in $*; do [ "$i" = "verb" ] && verb=v [ "$i" = "progress" ] && progress="--progress"doneRSYNC_SERVER=192.168.10.3 #rsync server IPAUTH_USER=backupBAKROOT=/var/backup/INC_DIR=incrementNOW=`date %Y-%m-%d_%H:%M` [ ! -e $BAKROOT ] && mkdir -p $BAKROOTPASSWD_FILE=/etc/rsyncd.confPASSWD_PERM=`ls -l $PASSWD_FILE|awk ''{print $1}''`if [ "$PASSWD_PERM" != "-rw-------" ]; then echo -e "nWARNING: permission of passwd file changed to 0600 n"; chmod 0600 $PASSWD_FILEfiLOGFILE=/var/log/rsync/rsyncbak.logEXCLUDES=/var/log/rsync/exclude_file[ ! -e $EXCLUDES ] && touch $EXCLUDESBACKUP_MODULES="www" #如需备份多个目录,在“”内添加server端的模块名,用空格隔开OPTIONS="--force --ignore-errors --delete --delete-excluded --exclude-from=$EXCLUDES $progress --password-file=$PASSWD_FILE --backup"rm -f /var/log/rsync/log.*log_id=0for bakdir in $BACKUP_MODULES; do log_id=`expr $log_id 1` SUBOPTS="--backup-dir=$BAKROOT/$INC_DIR/$BACKUP_MODULES/$NOW -az${verb}" rsync $OPTIONS $SUBOPTS $AUTH_USER@$RSYNC_SERVER::$bakdir $BAKROOT/$bakdir | tee /var/log/rsync/log.$log_iddone### 合并临时日志到备份日志中cat /var/log/rsync/log.* >> $LOGFILErm -f /var/log/rsync/log.*##### end of rsync.sh # chmod a x /etc/rc.d/init.d/rsync.sh 开始备份 # /etc/rc.d/init.d/rsync.sh verb progress 备份时,会自动从密码文件读取密码进行验证,备份的详细信息及进度会在当前终端输出,同时也记录到 backup.log 文件中.两次备份后,如果数据在这段时间内有改动,会产生差异备份数据,用当前时间命名,便于以后查找 如果有些数据你不想备份,可以加入到 exclude_file 文件中,每条记录占一行,支持通配符,比如/tmp ## 排除名为 tmp 的根目录 .[a-z]* ## 不备份以点开头的隐藏文件 (4)任务计划 # crontab -e0 2 * * * /etc/rc.d/init.d/rsync.sh 每天早上2点备份 ====================rsync 后记====================1. 备份时若需要考虑到传输数据的安全,可以通过 rsync over ssh 来完成,加入一个 -e ssh 参数即可,适用于远程备份机密数据的场合；内网备份或对数据安全没有什么要求,就不必了,通过ssh后备份速度会有所减慢.2. 备份参数中需要注意 --delete 参数,意为：删除本地备份目录存在,但是远程备份服务器不存在的文件和目录,也就是说,如果备份点删除了某个文件,备份过后,备份目的地的该文件也将被删除.还好有增量备份的存在,这个文件会移到增量备份目录中,如果没有增量备份,那么这个文件就永久被删除了.3. 暂时没了,以后想到了再补充 |
凌众科技专业提供服务器租用、服务器托管、企业邮局、虚拟主机等服务，公司网站：http://www.lingzhong.cn 为了给广大客户了解更多的技术信息，本技术文章收集来源于网络,凌众科技尊重文章作者的版权，如果有涉及你的版权有必要删除你的文章，请和我们联系。以上信息与文章正文是不可分割的一部分,如果您要转载本文章,请保留以上信息，谢谢! |
你可能对下面的文章感兴趣
关于通过rsync远程增量备份您的数据的所有评论
