你好,游客 登录 注册 搜索
背景:
阅读新闻

Rsync服务器的安装与配置详解

[日期:2017-01-23] 来源:Linux社区  作者:chenmingqi [字体: ]

一、Rsync简介
1.1什么是Rsync

Rsync是一款快速的,开源的,多功能的,可以实现全量和增量的远程和本地的数据同步和数据备份的工具。

全量的概念是:全部备份。

增量的概念是:差异化备份。对上一次基础上,对更新的部分作备份。
1.1.2    Rsync简介

  Rsync具有可以使本地和远程的两台主机之间的数据快速同步镜像远程备份的功能,这个功能类似ssh带scp的命令,但是有优于scp的功能,scp每次都是全量拷贝,而rsync是增量拷贝。
  Rsync还可以在本地主机的不同文件或者目录之间全量和增量的复制,类似于cp命令,cp命令是全量拷贝,而rsync是增量拷贝。
  Rsync还可以实现删除文件和目录的功能,相当于rm命令
  一个rsync相当于scp,cp,rm命令,并且还忧于他们每个命令,因为rsync具有增量备份的功能。

1.1.3  rsync的特性:
  1)支持拷贝特殊文件如链接文件,设备等
  2)可以有排除指定文件或者目录同步的功能,相当于打包命令tar的排除功能。
  3)可以做到保持原文件或者目录的权限,时间,软硬链接,属组,主等所有属性均不改变
  4)可以实现增量备份,既只同步发生变化的数据
  5)可以勇士rcp,rsh,ssh等方式来配合传输文件
  6)可以通过socket传输文件和数据
  7)支持匿名的认证模式传输
1.1.4  rsync三种工作方式
1)本地模式,相当于cp和rm命令
[root@rsync tmp]# rsync /etc/passwd /tmp/    ##相当于cp的命令
[root@rsync tmp]# ls
passwd
 
[root@rsync mnt]# rsync -avz --delete passwd  /mnt/  ##--delete相当于删除的功能
[root@rsync mnt]# ls
passwd
 
--delete的作用是删除的功能,本地有什么,远端就有什么。比如本地有passwd的内容,不管/mnt目录下面有什么,都只有passwd的内容,所有谨慎用--delete

2)通道模式,一般配合ssh key免秘钥使用,结合定时任务
[root@rsync mnt]# rsync -avz -e  'ssh -p 22' /etc/passwd root@10.0.0.31:/tmp/ 
root@10.0.0.31's password: 
sending incremental file list
passwd
[root@nfs tmp]# ls ##在远端查看
passwd

3)daemon模式
 
1.1.5 rsync的参数说明
-v :详细输出
-z :传输时进行压缩以提高传输效率。
-a :归档模式,表示以递归的方式传输文件,并保持文件的属性
--exclude :排除不需要同步传输的文件或者目录
--delete: 让目标目录和源目录的数据一致
--bwlimit: 限制带宽,默认单位是:kb(案例:某DBA做数据同步,导致用户无法访问网站)

二、Rsync服务器的安装
2.1安装准备

2.1.1查看rsync的版本号
[root@rsync ~]# rsync --version
rsync  version 3.0.6  protocol version 30
Copyright (C) 1996-2009 by Andrew Tridgell, Wayne Davison, and others.
Web site: http://rsync.samba.org/
Capabilities:
    64-bit files, 64-bit inums, 64-bit timestamps, 64-bit long ints,
    socketpairs, hardlinks, symlinks, IPv6, batchfiles, inplace,
    append, ACLs, xattrs, iconv, symtimes
rsync comes with ABSOLUTELY NO WARRANTY.  This is free software, and you
are welcome to redistribute it under certain conditions.  See the GNU
General Public Licence for details.

2.1.2 查看服务器的内核,版本信息
[root@rsync ~]# cat /etc/RedHat-release 
CentOS release 6.7 (Final)
[root@rsync ~]# uname -r
2.6.32-573.el6.x86_64
[root@rsync ~]# uname -m
x86_64

2.2主要讲一下通过daemon实现数据同步案例
/etc/rsyncd.conf是rsync的默认配置文件,该配置文件不存在,需要编辑内容

[root@linuxidc ~]# cat /etc/rsyncd.conf 
#rsync_config_____________________________start
#created by linuxidc 15:01 2007-6-5
##rsyncd.conf start##
uid = rsync  ##进程对应的用户,是虚拟用户。远端的命令使用rsync访问共享目录
gid = rsync  ##进程对应的用户组。
use chroot = no    ##安全相关
max connections = 200      ##最大连接数
timeout = 300    ##超时时间
pid file = /var/run/rsyncd.pid      ##进程对应的进程号文件
lock file = /var/run/rsyncd.lock    ##锁文件
log file = /var/log/rsyncd.log        ##日志文件
[backup]    ###模块名称
path = /backup      ###服务器提供访问的目录
ignore errors      ##忽略错误
read only = false    ##可写
list = false      ##不能列表
hosts allow = 172.16.1.0/24  ##允许的ip地址
##hosts deny = 0.0.0.0/32
auth users = rsync_backup    ##虚拟用户
secrets file = /etc/rsync.password    ###虚拟密码
#rsync_config________________________end

其中rsync用户默认是不存在的,需要创建用户
[root@rsync ~]# useradd rsync -s /sbin/nologin -M
[root@rsync ~]# cat  /etc/passwd|grep rsync
rsync:x:501:501::/home/rsync:/sbin/nologin
[root@rsync ~]# id rsync
uid=501(rsync) gid=501(rsync) 组=501(rsync)
 
为什么用虚拟用户?
应答:文件和进程都要满足属主的要求,文件和进程的存在一定是需要用户的,也是为了安全问题。

创建/backup目录,并且属主和属组都属于rsync
[root@rsync ~]# mkdir /backup/ -p
[root@rsync ~]# chown -R rsync.rsync /backup/
[root@rsync ~]# ls -ld /backup/
drwxr-xr-x 2 rsync rsync 4096 12月  9 2016 /backup/

创建配置文件/etc/rsync.password,默认不存在这个配置文件
[root@rsync ~]# cat /etc/rsync.password 
rsync_backup:linuxidc
[root@rsync ~]#chmod 600 /etc/rsync.password
[root@rsync ~]# ls -l /etc/rsync.password 
-rw-------. 1 root root 20 11月 29 01:14 /etc/rsync.password

启动服务:
[root@rsync ~]# rsync --daemon 
[root@rsync ~]#ps -ef|grep rsync|grep -v grep ##查看进程有没有启动
root      3046      1  0 15:19 ?        00:00:00

加入开机自启动

[root@rsync ~]# tail -1 /etc/rc.local 
/usr/bin/rsync --daemon

三、Rsync客户端的安装

编辑配置文件/etc/rsync.passwd,该配置文件默认不存在
vim  /etc/rsync.passwd
[root@linuxidc backup]# cat /etc/rsync.password 
linuxidc
chmod 600 /etc/rsync.passwd

创建backup目录
mkdir -p /backup
cd /backup
touch stu{01,100}

客户端推送:
方法1:
[root@linuxidc backup]# rsync -avz /backup/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password 
方法2:
[root@linuxidc backup]# rsync -avz /backup/ rsync://rsync_backup@172.16.1.41/backup/ --password-file=/etc/rsync.password

从客户端把服务端的东西拉回来的方案
服务端:
[root@linuxidc backup]# touch 1 234
[root@linuxidc backup]# ls
1  234

客户端:
[root@linuxidc ming]# rsync -avz  rsync_backup@172.16.1.41::backup/ /ming/  --password-file=/etc/rsync.password 
receiving incremental file list
./
1
234
 
sent 105 bytes  received 204 bytes  618.00 bytes/sec
total size is 0  speedup is 0.00
[root@linuxidc ming]# ls
1  234

四、Rsync多模块实战
1.1.1 多模块实战
实例1:
环境:
[root@linuxidc ~]# cat /etc/rsyncd.conf
#rsync_config_____________________________start
#created by linuxidc 15:01 2007-6-5
##rsyncd.conf start##
uid = rsync 
gid = rsync 
use chroot = no   
max connections = 200     
timeout = 300   
pid file = /var/run/rsyncd.pid     
lock file = /var/run/rsyncd.lock     
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password       
[backup]     
path = /backup     
[chen]
path = /chen
#rsync_config________________________end

服务器端:
[root@linuxidc ~]# mkdir /chen
[root@linuxidc ~]# ls -ld /chen/
drwxr-xr-x 2 rsync rsync 4096 12月  2 18:58 /chen/
客户端
[root@linuxidc ~]# ls -ld /ming
drwxr-xr-x 2 root root 4096 12月  2 18:26 /ming
[root@linuxidc ~]# rsync -avz /ming/ rsync_backup@172.16.1.41::chen/ --password-file=/etc/rsync.password 
sending incremental file list
./
ming1
ming10
ming2
ming3
ming4
ming5
ming6
ming7
ming8
ming9
 
sent 463 bytes  received 201 bytes  1328.00 bytes/sec
total size is 0  speedup is 0.00

服务端查看效果:
[root@linuxidc chen]# ls
ming1  ming10  ming2  ming3  ming4  ming5  ming6  ming7  ming8  ming9

实例2:
环境:
[root@linuxidc chen]# cat /etc/rsyncd.conf
#rsync_config_____________________________start
#created by linuxidc 15:01 2007-6-5
##rsyncd.conf start##
uid = rsync 
gid = rsync 
use chroot = no   
max connections = 200     
timeout = 300   
pid file = /var/run/rsyncd.pid     
lock file = /var/run/rsyncd.lock     
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password       
[backup]     
path = /backup     
[chen]
path = /chen
[luo]
path = /luo
ignore errors
read only = false
list = false

hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = tang
secrets file = /etc/tang
#rsync_config________________________end
[root@linuxidc chen]# mkdir /luo
[root@linuxidc chen]# chown rsync.rsync /luo
[root@linuxidc chen]# ls -ld /luo/
drwxr-xr-x 2 rsync rsync 4096 12月  2 19:18 /luo/
[root@linuxidc chen]# cat /etc/tang 
tang:tangguo
[root@linuxidc luo]# ls /etc/tang  -ld
-rw------- 1 root root 13 12月  2 19:34 /etc/tang
权限一定要是600

客户端配置:
[root@linuxidc ming]# cat /etc/tang 
tangguo
[root@linuxidc ming]# ls /etc/tang -ld
-rw------- 1 root root 8 12月  2 19:35 /etc/tang
客户端权限也一定要是600
[root@linuxidc ming]# rsync -avz /ming/ tang@172.16.1.41::luo/  --password-file=/etc/tang 
sending incremental file list
./
ming1
ming10
ming2
ming3
ming4
ming5
ming6
ming7
ming8
ming9
 
sent 463 bytes  received 201 bytes  1328.00 bytes/sec
total size is 0  speedup is 0.00

五、Rsync案例排错
5.1 案例1

[root@linuxidc ming]# rsync -avz /ming/ tang@172.16.1.41::luo/  --password-file=/etc/tang 
@ERROR: auth failed on module luo
rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]
[root@linuxidc luo]# tail -3 /var/log/rsyncd.log 
2016/12/02 19:46:18 [3601] secrets file must not be other-accessible (see strict modes option)
2016/12/02 19:46:18 [3601] continuing without secrets file
2016/12/02 19:46:18 [3601] auth failed on module luo from unknown (172.16.1.31): missing secret for user "tang"
 
报错的原因是服务器端的/etc/tang的权限问题没有设置为600,我们查看一下。
[root@linuxidc luo]# ls -ld /etc/tang 
-rwxr-xr-x 1 root root 13 12月  2 19:34 /etc/tang
权限改为600就可以了

5.2 案例2
[root@linuxidc ~]# rsync -avz /ming/ tang@172.16.1.41::luo/  --password-file=/etc/tang 
@ERROR: auth failed on module luo
rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]
查看日志
[root@linuxidc luo]# tail -3 /var/log/rsyncd.log 
2016/12/02 19:52:12 [3614] name lookup failed for 172.16.1.31: Name or service not known
2016/12/02 19:52:12 [3614] connect from UNKNOWN (172.16.1.31)
2016/12/02 19:52:12 [3614] auth failed on module luo from unknown (172.16.1.31): password mismatch
password mismatch,密码错误,客户端和服务器端的密码不一致导致的问题。
【注意】有的客户端和服务器端密码看起来一样,实际里面有空格,也能报错,注意一下

5.3 案例3
[root@linuxidc ~]# rsync -avz /backup/ rsync://rsync_backup@172.16.1.41/backup/ --password-file=/etc/rsync.password 
@ERROR: chdir failed
rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]
原因:服务端的backup目录不存在

5.4  案例4
[root@linuxidc ~]# rsync -avz /backup/ rsync://rsync_backup@172.16.1.41/backup/ --password-file=/etc/rsync.password 
sending incremental file list
./
rsync: failed to set times on "." (in backup): Operation not permitted (1)
1
 
sent 4325 bytes  received 1911 bytes  12472.00 bytes/sec
total size is 0  speedup is 0.00
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1039) [sender=3.0.6]
原因:服务端backup的属组和属主问题

RSync实现文件备份同步详解   http://www.linuxidc.com/Linux/2014-09/106967.htm

利用inotifywait监控主机文件和目录 http://www.linuxidc.com/Linux/2013-03/81075.htm

利用inotify+rsync实现Linux文件批量更新 http://www.linuxidc.com/Linux/2012-01/52132.htm

inotify-tools+rsync实时同步文件安装和配置 http://www.linuxidc.com/Linux/2012-06/63624.htm

rsync同步完整配置 http://www.linuxidc.com/Linux/2013-06/85781.htm

CentOS 6.5下Rsync远程同步 http://www.linuxidc.com/Linux/2014-05/101084.htm

Linux文件夹对比并提取的差分文件技巧-rsync的妙用 http://www.linuxidc.com/Linux/2016-02/128307.htm

Rsync 的详细介绍请点这里
Rsync 的下载地址请点这里

本文永久更新链接地址http://www.linuxidc.com/Linux/2017-01/139888.htm

linux
相关资讯       rsync配置  rsync安装 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款