当前位置: 首页 > 编程笔记 >

Rsync实现文件定时同步技巧

万俟穆冉
2023-03-14
本文向大家介绍Rsync实现文件定时同步技巧,包括了Rsync实现文件定时同步技巧的使用技巧和注意事项,需要的朋友参考一下

使用背景:

       2005年5月,商务网处于上线阶段。但,由于总总原因一直迟迟不能上线。系统基本功能都已经实现了,但是作为一个商务网整体来说,文件同步这块还没有完成。正好自己这段时间不是很忙。对这块也有些兴趣,所以决定摸摸看。

       万事开头难,从没接触过什么同步之类的,怎么开始呢?幸好以前做邮件系统的时候,认识了Eyou的小熊,请教了他,于是推荐了Rsync这个好工具给我。在此,特别感谢小熊的帮助。
       Rsync的优点是部署方便,使用方便,效率高,并且它是开源的。目前在某些Linux服务器版中已经将其捆绑进来,可见其功能已经得到了较高的认可。

       关于Rsync的介绍,大家可以去google里面搜索,相信能找到更多,在此,我就不再浪费大家时间了(鲁迅先生说过:浪费别人时间等于谋财害命,浪费自己的时间等于慢性自杀。知道后果的严重性了吧,呵呵)。还是来看看我的实现步骤吧。

操作系统:

       文件服务器端: Red Hat Linux Advanced Server release 2.1AS/i686 (Pensacola)

       客户端:Red Hat Linux release 7.2 (Enigma)

       其中,服务器端的Linux已经捆绑了 Rsync。我在AIX下也实现了客户端.

       [注意事项]:

1、要确定系统本身是否已经绑定(安装)了Rsync,可以到/usr/bin ,/usr/local/bin/ 或者 /usr/sbin/ 等目录下查找 Rsync是否存在,或者使用 whereis  rsync,也行。

2、已绑定了Rsync的系统,在 /etc/xinetd.d/rsync 中,默认是关闭的。可以将其打开,然后 重起服务 service xinted restart

3、如果系统本身已安装了,那就不需要再安装,如果需要升级Rsync版本,只需按照正常的安装步骤安装即可。

4、rsync默认绑定的是873端口,如果rsync已经作为后台进程启动了,那么通过netstat –nap|grep 873  应该可以查看到有rsync 进程。

1、安装rsync

       第一步:从 http://rsync.samba.org/  下载rsync包(本文配置使用Rsync 2.6.5 released)

       第二步:将rsync包上传到作为服务器的机器上(例如:128.128.6.168)

       第三步:转到root身份登录,解压rsync-2.6.5pre2.tar.gz包,到指定目录(例如: /home/zuohao/rsync/),并且将rsync目录分配给某个用户(例如:zuohao)。

       第四步:进入rsync 目录。 键入:./configure。

Rsync将检测系统信息,并且生成相关文件。

       第五步:键入make,编译 C文件。(注意:运行该命令前先确定是否安装C编译器,例如gcc,cc等。)
       第六步:键入 make install 安转rsync。(注意:运行该命令前先确定是否安装C编译器,例如gcc,cc等。)
       第七步:如果以上编译都没有问题,rsync安装完成。

2、  配置rsync服务端

服务端的主要配置文件是 /etc/rsyncd.conf(该文件可能不存在,可以自己新建一个。)  ,通过该文件可以配置全局访问的参数,需要备份的模块参数。以下面的配置为例:


uid = root

gid = root

use chroot = no

max connections = 4

pid file = /var/run/rsyncd.pid

lock file = /var/run/rsync.lock

log file = /var/log/rsyncd.log

hosts allow = 128.128.6.38

[inburst]

path = /usr/shr

comment = BACKUP CLIENT IS REDHAT ADVANCE SERVER 3.0

read only = yes

list = no

auth users = root

secrets file = /etc/inburst.pass

[file0]

path = /home/zuohao/www

comment = my rsync site

exclude = configfile

   rsyncd.conf 可以有更多的配置,例如密码的验证,模块的设置等。

[注意事项]

 rsyncd.conf 以及密码文件的权限必须是600,即只有root可读\写

更多rsyncd.conf属性请参考. http://rsync.samba.org/ftp/rsync/rsyncd conf.html

3、  配置rsync 客户端

第一步:安装rsync:在客户端上要实现同步,同样需要安转rsync服务,(安装方法参考上面)。

第二步:测试是否安装成功。

在命令行输入:


rsync -vzrtopg --progress --delete zuohao@128.128.6.38::file0 /home/zuohao/backup/

查看本地目录/home/zuohao/backup/ 是否与服务器中的需要备份目录文件已经同步。

更多参数说明,参考rsync网站说明文档:

http://rsync.samba.org/ftp/rsync/preview/rsync.html

第三步:编制定时运行shell,运行以上命令,实现文件的定时同步。

通过编辑crontab ,增加相应的脚本,实现文件的定时同步.本例脚本如下:

*/30 * * * * zuohao /usr/local/bin/rsync.sh

在每个30分钟的时候运行一次.

4、安装完成

完成以上配置后, rsync的服务器端和客户端的配置就已经完成,简单的文件定时同步基本能够实现了.在 rsync 的官方网站上 http://rsync.samba.org/ 有更多的例子和文档可以参考.希望大家能通过本例,对rsync有大至的了解后,能够去看那些文档,这样能够更全面的使用rsync.

注意事项

1、  一般情况下 Linux 服务器版都已经安装了rsync。

2、  安装rsync之前务必确定系统是否已安装了C编译器。否则安装无法继续。

3、  rsync的安装必须是root用户。

4、  rsyncd.conf文件的权限必须只有root能读、写,即 chmod 600 rsyncd.conf

5、  如果使用密码文件,密码文件的权限属性也只能是600

6、  一个rsyncd.conf 文件可以配置多个备份模块,每个模块可以定义允许访问的ip(hosts allow)地址以及不能访问的ip(hosts deny)具体参考rsync网站的rsyncd.conf说明文档。

 类似资料:
  • 本文向大家介绍Sersync+Rsync实现触发式文件同步实战过程,包括了Sersync+Rsync实现触发式文件同步实战过程的使用技巧和注意事项,需要的朋友参考一下 背景   通常我们在服务器上使用rsync加上crontab来定时地完成一些同步、备份文件的任务。随着业务和应用需求的不断扩大、实时性要求越来越高。一般rsync是通过校验所有文件后,进行差量同步,如果文件量十分庞大,那么rsync

  • 本文向大家介绍python+rsync精确同步指定格式文件,包括了python+rsync精确同步指定格式文件的使用技巧和注意事项,需要的朋友参考一下 本文实例为大家分享了python+rsync精确同步指定格式文件的具体代码,供大家参考,具体内容如下 以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持呐喊教程。

  • 本文向大家介绍rsync 只同步目录结构不同步文件的方法,包括了rsync 只同步目录结构不同步文件的方法的使用技巧和注意事项,需要的朋友参考一下 If you are using an older rsync version, try:

  • 本文向大家介绍在Windows中配置Rsync同步文件的方法,包括了在Windows中配置Rsync同步文件的方法的使用技巧和注意事项,需要的朋友参考一下 Rsync是一款不错的文件免费同步软件,可以镜像保存整个目录树和文件系统,同时保持原来文件的权限、时间、软硬链接。第一次同步时 rsync 会复制全部内容,下次只传输修改过的文件部分。传输数据过程中可以实行压缩及解压缩操作,减少带宽流量。支持s

  • 本文向大家介绍python rsync服务器之间文件夹同步脚本,包括了python rsync服务器之间文件夹同步脚本的使用技巧和注意事项,需要的朋友参考一下 本文实例为大家分享了python rsync服务器之间文件夹同步的具体代码,供大家参考,具体内容如下 About  rsync 配置两台服务器之间3ssh-key后,可以实现自动化无需手动输入密码,脚本如下: 以上就是本文的全部内容,希望对

  • 本文向大家介绍python实现两个文件夹的同步,包括了python实现两个文件夹的同步的使用技巧和注意事项,需要的朋友参考一下 其实无论windows还是Linux,简单地去实现两个两个文件夹的同步只需系统自带的复制命令加参数就可以了。 WINDOWS: Linux: 这里使用python来实现这些基本功能,并增加一些去重之类的增强功能。 1、复制源文件夹中文件至目标文件夹 要想同步两个文件夹中的