Linux安装:rsync服务 实现服务器远程备份

1、rsync介绍

Rsync 是一款开源的,快速的,多功能的,可实现全量及增量(差异化备份)的本地或远程数据同步备份的优秀工具。

Rsync软件适用于Unix、Linux、Windows等多种操作系统。

  1. 可使本地和远程两台主机之间的数据快速复制同步镜像,远程备份的功能,这个功能类似ssh带scp命令,但又优于scp命令的功能,scp每次都是全量拷贝,而rsync可以增量拷贝。
  2. rsync还可以在本地主机的不同分区或目录之间全量及增量的复制数据,
  3. 利用rsync还可以实现删除文件和目录的功能。相当于rm
  4. rsync相当于scp,cp.rm但是还优于他们每一个命令。

在同步备份数据时,默认情况下rsync通过独特的“quick check” 算法,它仅同步大小或者最后修改时间发生变化的文件或目录,当然也可以是根据权限,属主等属性的变化同步,但需要指定相应的参数,甚至可以实现只同步一个文件里有变化的内容部分,所以可以实现快速的同步备份数据。

Rsync传输数据的方式

  1. 单个主机本地之间的数据传输(此时类似于cp命令的功能)
  2. 借助rcp,ssh等通道来传输数据(此时类似于scp命令的功能)
  3. 以守护进程(socket)的方式传输数据(这个是rsync自身的重要功能)

 

2、服务配置

有台web服务器A:192.168.1.1。有重要数据,需要定时备份到其他服务器上,或者异地。

有台备份服务器B:192.168.1.2,用来备份和存储数据。(或者是局域网内的某台式电脑)

操作系统:centos7

2.1、配置服务器A

服务器A是服务端,安装rsync服务,并指定一个目录,等待客户端来获取数据

先安装rsyncd,系统默认自带,没有的话安装即可

yum -y install rsync

配置文件

vi /etc/rsyncd.conf

uid = nobody   #启动rsyncd的用户
gid = nobody  #启动rsyncd的用户组
use chroot = no
max connections = 10  #同时可以连接的数量
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
log file = /var/log/rsyncd.log
port = 873
secrets file = /etc/rsyncd/server.pass  #密码文件

#模块名,可以配置多个目录
[SYNC]
path = /DATA/SYNC  #具体目录
ignore errors   #忽略一般的IO错误
read only = true
list = false
hosts allow = *  #允许的IP
hosts deny = 0.0.0.0  #禁止的IP
auth users=syncbakup  #允许连接的用户

创建密码文件

# 创建目录,如果不存在
mkdir /etc/rsyncd

# 创建密码文件
vi /etc/rsyncd/server.pass

syncbakup:123456

# 修改权限
chmod 600 /etc/rsyncd/server.pass

启动

# 启动服务器
systemctl start rsyncd

# 设置开机启动
systemctl enable rsyncd

开启防火墙

# 创建防火墙服务定义文件
vi /etc/firewalld/services/rsync.xml

<?xml version="1.0" encoding="utf-8"?>
<service>
  <short>RSYNC</short>
  <description>rsync.</description>
  <port protocol="tcp" port="873"/>
  <port protocol="udp" port="873"/>
</service>

firewall-cmd --reload

#开放防火墙的rsync服务
firewall-cmd --permanent --zone=public --add-service=rsync
firewall-cmd --reload

 

2.2、配置服务器B

服务器B是客户端,定时主动把服务器A的目录同步下来

安装rsyncd,系统默认自带,没有的话安装即可

yum install -y rsync

配置文件

客户端不需要配置模块,也不需要启动服务,配置文件只要简单如下配置:

vi /etc/rsyncd.conf

uid = nobody   #启动rsyncd的用户
gid = nobody  #启动rsyncd的用户组
use chroot = no
max connections = 10  #同时可以连接的数量
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
log file = /var/log/rsyncd.log
port = 873
secrets file = /etc/rsyncd/server.pass  #密码文件

创建密码文件

mkdir /etc/rsyncd

# 创建密码文件,这里只需要写密码,不需要写用户名
vi /etc/rsyncd/server.pass

123456

# 修改权限
chmod 600 /etc/rsyncd/server.pass

同步命令

vi /DATA/BAK/bakup.sh

rsync -avzP --delete --password-file=/etc/rsyncd/server.pass syncbackup@192.168.1.1::SYNC /DATA/BAK/SYNC

 

2.3、同一台服务器内2个目录之间的同步

不需要借助服务,直接通过命令即可

rsync -avzP --delete /source/ /target/

 

2.4、借用ssh同步

rsync -avzP -e "ssh -p 22"   root@192.168.31.1:/userdisk/appdata/*  ./ 

 

3、命令参数

rsync的基础语法为:rsync [OPTION...] SRC... [DEST]

支持的参数高达一百多个,最常用的选项组合是"avz",即压缩和显示部分信息,并以归档模式传输。

常用参数

-a, –archive     归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD
-avzP            提示:这里的 相当于 -vzrtopgDlP(还多了Dl功能)生产环境常用 
-avz             定时任务就不用输出过程了可以-az

详细参数

-r, –recursive        对子目录以递归模式处理
-l, –links            保留软链结
-p, –perms            保持文件权限
-t, –times            保持文件时间信息
-g, –group            保持文件属组信息
-o, –owner            保持文件属主信息
-D, –devices          保持设备文件信息

-v, –verbose          详细模式输出
-z, --compress        传输时进行压缩以提高传输效率
--compress-level=NUM  可按级别压缩
-P                    显示同步的过程及传输时的进度等信息

-q, –quiet            精简输出模式
-c, –checksum         打开校验开关,强制对文件传输进行校验

-b, –backup           创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用–suffix选项来指定不同的备份文件前缀。
–backup-dir           将备份文件(如~filename)存放在在目录下。
-suffix=SUFFIX        定义备份文件前缀
-u, –update           仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件。(不覆盖更新的文件)

-L, –copy-links       想对待常规文件一样处理软链结
–copy-unsafe-links    仅仅拷贝指向SRC路径目录树以外的链结
–safe-links           忽略指向SRC路径目录树以外的链结
-H, –hard-links       保留硬链结

-S, –sparse           对稀疏文件进行特殊处理以节省DST的空间
-n, –dry-run          现实哪些文件将被传输
-W, –whole-file       拷贝文件,不进行增量检测
-x, –one-file-system  不要跨越文件系统边界
-B, –block-size=SIZE  检验算法使用的块尺寸,默认是700字节
-e, –rsh=COMMAND      指定替代rsh的shell程序
–rsync-path=PATH      指定远程服务器上的rsync命令所在路径信息
-C, –cvs-exclude      使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件
–existing             仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件

–delete               删除那些DST中SRC没有的文件
–delete-excluded      同样删除接收端那些被该选项指定排除的文件
–delete-after         传输结束以后再删除
–ignore-errors        及时出现IO错误也进行删除
–max-delete=NUM       最多删除NUM个文件
–partial              保留那些因故没有完全传输的文件,以是加快随后的再次传输
–force                强制删除目录,即使不为空

–numeric-ids          不将数字的用户和组ID匹配为用户名和组名
–timeout=TIME IP      超时时间,单位为秒
-I, –ignore-times     不跳过那些有同样的时间和长度的文件
–size-only            当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间
–modify-window=NUM    决定文件是否时间相同时使用的时间戳窗口,默认为0
-T –temp-dir=DIR      在DIR中创建临时文件
–compare-dest=DIR     同样比较DIR中的文件来决定是否需要备份
-P 等同于 –partial
–progress             显示备份过程

–exclude=PATTERN      指定排除不需要传输的文件模式
–include=PATTERN      指定不排除而需要传输的文件模式
–exclude-from=FILE    排除FILE中指定模式的文件
–include-from=FILE    不排除FILE指定模式匹配的文件

–version              打印版本信息
–address              绑定到特定的地址
–config=FILE          指定其他的配置文件,不使用默认的rsyncd.conf文件
–port=PORT            指定其他的rsync服务端口
–blocking-io          对远程shell使用阻塞IO
-stats                给出某些文件的传输状态
–progress             在传输时现实传输过程
–log-format=formAT    指定日志文件格式
–password-file=FILE   从FILE中得到密码
–bwlimit=KBPS         限制I/O带宽,KBytes per second
-h, –help             显示帮助信息

举例

rsync foo/bar/foo.c remote:/tmp/

则在/tmp目录下创建foo.c文件,而如果使用-R参数:

rsync -R foo/bar/foo.c remote:/tmp/

则会创建文件/tmp/foo/bar/foo.c,也就是会保持完全路径信息。