您身边的IT服务专家

咨询电话:0532-81668190

解决方案

SOLUTION

服务于青岛中小企业的IT外包公司
低成本、高服务、高效率

青岛it外包

运维必备!Linux 远程数据同步工具详解

服务项目

网管外包

个人电脑维护

企业桌面维护

企业网络维护

企业服务器维护

企业网络布线

服务器代维

服务器安全

服务器租赁

新办公室IT建设

企业系统网络安全

企业网站建设

办公网络上网管理

办公设备维护

网站维护

门禁监控

  

一、简介

1 认识

Rsync(remote synchronize)是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件。Rsync使用所谓的“Rsync算法”来使本地和远 程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快;

Rsync支持大多数的类Unix系统,无论是Linux、Solaris还是BSD上都经过了良好的测试;

此外,它在windows平台下也有相应的版本,如cwRsync和Sync2NAS等工具

2 原理

Rsync本来是用于替代rcp的一个工具,目前由rsync.samba.org维护,所以rsync.conf文件的格式类似于samba的主配 置文件;

Rsync可以通过rsh或ssh使用,也能以daemon模式去运行在以daemon方式运行时Rsync server会打开一个873 端口,等待客户端去连接。

连接时,Rsync server会检查口令是否相符,若通过口令查核,则可以开始进行文件传输。第一次连通完成时,会把整份文件传输一次,以后则就只需进行增量备份。

3 特点

可以镜像保存整个目录树和文件系统;

可以很容易做到保持原来文件的权限、时间、软硬链接等;

无须特殊权限即可安装;

优化的流程,文件传输效率高;

可以使用rsh、ssh等方式来传输文件,当然也可以通过直接的socket连接;

支持匿名传输

二、ssh模式

1 本地间同步

  1. 环境: 172.16.22.11 
  2. # mkdir src # touch src/{a,b,c,d} # mkdir dest # rsync -av 172.16.22.12:/data/test/src/ dest/ --远程同步至本地,需输入root密码 # rsync -av src/ 172.16.22.12:/data/test/dest/ --本地文件同步至远程 # rsync -av src 172.16.22.12:/data/test/dest/ --整个目录同步过去 # rm -rf src/d --删除一个文件 d # rsync -av --delete src/ 172.16.22.12:/data/test/dest/ --delete,从目标目录里面删除无关的文件 

2、局域网间同步

环境: 172.16.22.11

  1. # useradd george # passwd george # mkdir /home/george/test # touch /home/george/test/g{1,2,3,4} 

3、局域网指定用户同步

—172.16.22.12

  1. # useradd george # passwd george # mkdir /home/george/test # touch /home/george/test/g{1,2,3,4} 

—172.16.22.11

  1. # rsync -av src '-e ssh -l george' 172.16.22.12:/home/george --本地同步至远程 # rsync -av 172.16.22.12:/home/george/test/g* '-e ssh -l george -p 22' dest/ 

三、daemon模式

  1. 环境:192.168.22.11 

1、服务启动方式

1.1、对于负荷较重的 rsync 服务器应该使用独立运行方式

  1. # yum install rsync xinetd --服务安装 # /usr/bin/rsync --daemon 

1.2、对于负荷较轻的 rsync 服务器可以使用 xinetd 运行方式

# yum install rsync xinetd --服务安装 # vim /etc/xinetd.d/rsync --配置托管服务,将下项改为 no disable = no # /etc/init.d/xinetd start --启动托管服务 xinetd # chkconfig rsync on # netstat -ntpl | grep 873 --查看服务是否启动

2、配置详解

两种 rsync 服务运行方式都需要配置 rsyncd.conf,其格式类似于 samba 的主配置文件

全局参数

模块参数

模块参数主要用于定义 rsync 服务器哪个目录要被同步。模块声明的格式必须为 [module] 形式,这个名字就是在 rsync 客户端看到的名字,类似于 Samba 服务器提供的共享名。而服务器真正同步的数据是通过 path 来指定的

基本模块参数

模块控制参数

模块文件筛选参数

模块用户认证参数

模块访问控制参数

模块日志参数

设置了”log file”参数时,在日志每行的开始会添加”%t [%p]“;

可以使用的日志格式定义符如下所示:

3、服务端配置

  1. # vim /etc/rsyncd.conf --为 rsyncd 服务编辑配置文件,默认没有,需自己编辑 

path = /data/test/src —该模块存放文件的基础路径

ignore errors = yes —忽略一些无关的I/O错误

read only = no —客户端可以上传

write only = no —客户端可以下载

hosts allow = 192.168.22.12 —允许连接的客户端主机ip

hosts deny = —黑名单,表示任何主机

list = yes

auth users = web —认证此模块的用户名

secrets file = /etc/web.passwd —指定存放“用户名:密码”格式的文件

  1. # mkdir /data/test/src --创建基础目录 # mkdir /data/test/src/george --再创建一个目录 # touch /data/test/src/{1,2,3} # echo "web:123" > /etc/web.passwd --创建密码文件 # chmod 600 /etc/web.passwd # service xinetd restart 

四、测试

1、客户端

  1. 环境:192.168.22.12 
  2.  
  3. # yum -y install rsync # mkdir /data/test 

2、小试参数

# rsync -avzP web@192.168.22.11::web1 /data/test/ --输入密码 123;将服务器 web1 模块里的文件同步至 /data/test,参数说明:

  1. # rsync -avzP --delete web@192.168.22.11::web1 /data/test/ --让客户端与服务器保持完全一致, --delete # rsync -avzP --delete /data/test/ web@192.168.22.11::web1 --上传客户端文件至服务端 # rsync -avzP --delete /data/test/ web@192.168.22.11::web1/george --上传客户端文件至服务端的 george 目录 # rsync -ir --password-file=/tmp/rsync.password web@192.168.22.11::web1 --递归列出服务端 web1 模块的文件 # rsync -avzP --exclude="*3*" --password-file=/tmp/rsync.password web@192.168.22.11::web1 /data/test/ --同步除了路径以及文件名中包含 “3” *的所有文件 

3、通过密码文件同步

  1. # echo "123"> /tmp/rsync.password # chmod 600 /tmp/rsync.password # rsync -avzP --delete --password-file=/tmp/rsync.password web@192.168.22.11::web1 /data/test/ --调用密码文件 

4、客户端自动同步

  1. # crontab -e 
  2. 10 0 * rsync -avzP —delete —password-file=/tmp/rsync.password web@192.168.22.11::web1 /data/test/ 
  3. # crontab -l 

五、数据实时同步

环境:Rsync + Inotify-tools

1、inotify-tools

2、安装inotify-tools

  1. # yum install –y gcc --安装依赖 # mkdir /usr/local/inotify # tar -xf inotify-tools-3.14.tar.gz # cd inotify-tools-3.14 # ./configure --prefix=/usr/local/inotify/ # make && make install 

3、设置环境变量

  1. # vim /root/.bash_profile 
  1. export PATH=/usr/local/inotify/bin/:$PATH 
  2. # source /root/.bash_profile # echo '/usr/local/inotify/lib' >> /etc/ld.so.conf --加载库文件 # ldconfig # ln -s /usr/local/inotify/include /usr/include/inotify 

4、常用参数

鲁公网安备 37020302370277号