zjjfly's blog

Java,Clojure,Scala...

0%

rsync使用心得

本人有一段时间就职于某市的公积金项目,项目每次上线新的功能,都要复制代码到多个服务器上,手动复制显得很繁琐,可靠性也无法保障。所以曾探索使用rsync进行自动复制,但由于种种原因最终未能投入生产环境,在此把一些经验和大家分享。
下面的内容需要在已安装rsync的机器上运行,安装方法可以自行搜索。

1.启动

先查看一下rsync是否已经启动,运行命令ps -ef|grep rsync,下图就是已经启动了的。
rsync.png
如没有启动,运行命令/usr/bin/rsync –daemon,再次运行上面那个命令看是否启动成功。

2.配置


2.1服务器端配置

首先进入/etc目录,创建一个文件rsyncd.conf,内容可以像下面这样(每一行的第一个数字是行号):

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
1 pid file=/var/rsynclog/rsyncd.pid
2 log file=/var/rsynclog/rsyncd.log
3 lock file=/var/rsynclog/rsync.lock
4 motd file=/etc/rsyncd.motd
5 port=808
6 address=192.168.1.1
7 hosts allow=192.168.1.2
8 hosts deny=0.0.0.0/0
9 uid=weblogic
10 gid=bea
11 max connections=10
12 [deploy]
13 path=/tmp/test/testsync
14 comment=test for use
15 exclude=/WEB-INF/apps/loan/portal_config.xml /WEB- INF/apps/loan/view_config.xml
16 ignore errors
17 read only=yes
18 hosts allow=192.168.1.2
19 hosts deny=0.0.0.0/0
20 list=yes
21 auth users=weblogic
22 secrets file=/etc/rsyncd.secrets

接下来我对这些配置的意义做一些说明。
第1行,线程文件路径,用来存放rsync的进程号。
第2行,日志文件的路径,同步的日志主要就是在此文件中。
第3行,锁文件的路径。
第4行,欢迎文件,可自定义。
第5行,rsync daemon的传输端口,默认就是083。
第6行,rsync daemon监听的IP,默认是当前地址。
第7行,允许的客户端ip。
第8行,屏蔽的客户端ip。
第9行,运行该服务的用户,可以配置在模块中。
第10行,运行该服务的用户所属的组,可以配置在模块中。
第11行,最大连接数。
第12行,模块名,自己取。
第13行,该模块的路径,比如需要同步的工程所在的目录。
第14行,运行同步时的注释,自定义。
第15行,同步时排除的文件,这些文件就不会同步了,一般是配置文件。
第16行,可以忽略一些无关的IO错误。
第17行,客户端对于服务端的文件是否只读,如果是false的客户端可以上传文件。
第18行,同第7行。
第19行,同第8行。
第20行,是否把rsync服务器上提供同步数据的目录显示。
第21行,同步验证时用的账号。如果没有这项就是匿名同步,客户端同步时不需要用户名也能同步,所以不推荐这样做。
第22行,认证文件的路径。
接下来就是配置认证文件。创建一个文件rsyncd.secrets,内容可以像下面这样:

1
2
root:rootby
weblogic:weblogic

格式是“用户名:密码”。注意,这个文件的权限要设成600命令是

1
chmod +600 /etc/rsync.secrets

首先,创建一个密码文件rsync.pwd,内容可以像下面这样:

1
weblogic

这个文件只包含密码部分,是服务器配置文件中配置的uid的密码。这个文件的权限也是要设置成600。
至此,配置的工作已经结束了。

3.常用命令


3.1 本地同步

rsync可以在本地同步文件,命令可以是下面这样:

1
rsync -avz testsync /tmp/test

把当前目录的testsync文件夹同步到/tmp/test目录下,如果/tmp/test下面之前没有testsync文件夹,那就相当于把testsync复制到/tmp/test下,如果已经有了,则会把当前目录下的testsync文件夹相对于/tmp/test/testsync不一样的部分复制过去。
如果输入如下命令:

1
rsync -avz --delete testsync /tmp/test/

和上面那条功能基本相似,但会把/tmp/test/testsync中相对当前目录下的testsync文件夹的内容多余的部分删除掉(例如,/tmp/test/testsync下有1.txt,2.txt,3.txt这几个文件,前目录下的testsync文件夹有1.txt,2.txt,其中两个文件夹中的1.txt和2.txt内容完全一致,则用这个命令同步时会把3.txt删除。

上面两个命令带的-avz和—delete可以用在下面所有提到的命令。

3.2 pull

pull就是客户端主动请求和服务器端同步,命令如下

1
rsync -azv--password-file=/tmp/rsync.pwd weblogic@192.168.1.1::deploy /tmp/deploy/

其中,–password-file参数是指明密码文件的路径,weblogic是同步时用的用户,@后面的ip是服务器地址,::后的deploy是服务器配置文件中的一个模块的名称,最后的路径就是客户端需要同步的目录

3.3.push

push是客户端主动把文件同步到服务器端,命令如下

1
rsync -azv--password-file=/tmp/rsync.pwd /tmp/test/deploy/ weblogic@192.168.1.1::deploy

参数基本和pull的一样,只是把客户端要同步的文件路径放到了前面。
对于那些需要发布多份相同代码到多个服务器上的情况,本人建议用这种方式去同步,只需要先上传到一台机器上,然后把代码push到其他的机器上即可。

4.参考资料


http://www.iteye.com/topic/604436
http://www.cnblogs.com/chijianqiang/archive/2011/05/09/2041537.html
http://blog.chinaunix.net/uid-24960107-id-279170.html
http://wanwentao.blog.51cto.com/2406488/579008
http://blog.sina.com.cn/s/blog_5eda2dda01015fcs.html