Rsync实现定时自动同步备份任务

标签：tmp Rsync -- 备份 rsync etc 定时 backup

 

rsync全量备份 

增量备份.

Rsync 等价cp ,scp,rm,ls 四个命令功能.是一款实现全量及增量复制同步的软件工具.

scp 命令解释:

#1,从远程服务器中下载数据文件到本地主机:

scp root@host1:/tmp/test1 /tmp

#2,从远程服务器中拷贝目录文件到本地主机下面

scp   -r root@host1:/tmp  /tmp (加-r 参数表示递归,拷贝目录及其下的文件)

#3,将本地文件拷贝到远程服务器上.

scp /tmp/test1 root@host1:/tmp

[root@backup ~]# scp [email protected]:/tmp/test1 /tmp
[email protected]'s password:
test1 100% 50 0.1KB/s 00:00

#4,将本地主机下的目录上传到远程服务器上

scp -r /tmp root@host1:/tmp

Rsync命令实践,等同于scp:

rsync -rp /tmp/ [email protected]:/tmp/          

rsync -rp /tmp  [email protected]:/tmp/

说明: 同步数据时，/tmp/目录后有/信息，表示将目录下面的数据内容进行备份同步

　　　同步数据时，/tmp目录后没有/信息，表示将目录及目录下面的数据内容进行备份同步

rsync 等价于rm命令:

说明:

rsync实现删除目录中数据内容过程，就将一个空目录和一个有数据的目录进行同步
最终，会将有数据的目录中的文件进行清空

[root@backup ~]# rsync --delete /null/ /tmp/
rsync: --delete does not work without -r or -d.
rsync error: syntax or usage error (code 1) at main.c(1422) [client=3.0.6]

rsync   -r --delete /null/ [email protected]:/tmp/tmp/  (同步目录时用-r 参数)

rsync 等价与ls命令 

ls -l  /etc/hosts

[root@backup ~]# rsync /etc/hosts
-rw-r--r-- 365 2018/12/02 17:28:16 hosts

rsync 工作方式:

①. 本地数据备份方式(cp)

Local: rsync [OPTION...] SRC... [DEST]

rsync --- 数据备份传输命令
option --- 可以输入一下和rsync传输数据有关的参数
src --- 要进行备份的数据（文件/目录）
dest --- 将数据信息备份到什么位置（相应路径中）

②. 远程数据备份方式 (scp)

Push(推) 从本地向远程复制

SRC  --- 指定本地主机要传输到远程主机的数据

DEST --- 将本地数据保存到远端的什么路径中

[root@backup ~]# rsync -avz etc\[date\].tar.gz 172.16.1.31:/tmp/

 

Pull(拉) 从远程向本地复制

rsync [option] src dest

rsync -a 172.16.1.31:/etc/sysconfig/network /data

USER@]HOST: --- 需要指定以什么用户身份登录到远程主机，
如果省略USER信息，表示以当前用户身份进行登录

③. 守护进程传输模式 Rsync daemon:

Access via rsync daemon:
Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]

Push: rsync [OPTION...] SRC... [USER@]HOST::DEST
rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST

这种复制方式必须掌握, 常用在服务器的数据备份中,设置成守护进程,随系统服务自动启动,定时备份网站和数据.

服务端部署流程:

1) 检查rsync服务是否安装: rpm -qa |grep rsync

2)编写配置文件 vim /etc/rsyncd.conf

uid = rsync
gid = rsync
use chroot = no
max connections = 200
timeout = 300
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
[backup]
comment = "backup dir"
path = /backup

 

3)创建备份目录管理用户, rsync

useradd -M -s /sbin/nologin rsync

4) 创建备份目录

mkdir /backup 

5)创建认证文件,并且让密码文件只有root可以操作,other和group用户无法操作

echo " rsync:123456" >>/etc/rsync.password

chmod 600 /etc/rsync.password

6) 以守护进程启动rsync服务

rsync --daemon

客户端部署Rsync 服务.

1)客户端首先 也要先验证是否安装rsync服务. rpm -qa |grep  rsync 

2) 安装了rsync服务后需要先设置传输的一个认证密码

echo "123456" >>/etc/rsync.password (密码需要和服务端的保持一致)

3)然后就可以通过rsync 将本地的文件备份到远程的备份服务器上.

rsync -avz src dest 

以上报错是说备份的用户没有对模块/bakup 的访问权限,需要更改权限.

在服务端设置chown -R rsync.rsync /backup (对要存储备份文件的目录设置属主和属组都属于rsync)然后再在客户端进行备份操作即可.

Rsync 常见错误分析.

@1,查看报错信息并分析,模拟环境下试试

@2,查看服务的日志文件信息;tail -f /var/log/rsyncd.log 

 #1 客户端错误.

no route to host  一般是防火墙策略问题导致,

#2, 报错2.客户端的错误,

The remote path must start with a module name not a /(必须是模块名称,不是路径名称)

#3.服务认证用户认证失败, 确认账户和密码是否一致.

肯定是密码或者用户名的错误导致的..

或者是 /etc/rsync.password 文件权限不足600 导致的

注意点:

1.密码真的输入错误,用户名输入错误导致;

2.指定的文件密码的路径和实际文件名称不一致;

3./etc/rsync.password 文件权限不足600 导致

4.rsync_backup:123456  密码配置文件后面注意不要空格

5.rsync客户端密码文件中只输入密码信息即可,不要输入虚拟认证用户名称.

 

#4.rsync 服务位置模块错误.

@ERROR: Unknown module 'game'

rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]

#5. rsync服务权限阻止问题
【客户端的错误】
Permission denied
【错误演示过程】
[root@nfs01 tmp]# rsync -avz /etc/hosts [email protected]::backup
Password:
sending incremental file list
hosts
rsync: mkstemp ".hosts.5z3AOA" (in backup) failed: Permission denied (13)
sent 196 bytes received 27 bytes 63.71 bytes/sec
total size is 349 speedup is 1.57
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1039) [sender=3.0.6]
【异常问题解决】
1. 备份目录的属主和属组不正确，不是rsync
2. 备份目录的权限不正确，不是755

#6.rsync服务备份目录异常

chdir  failed 客户端错误

异常解决:

1.备份目录没有建立

2.建立的备份目录

Rsync 设置多模块进行备份.

守护进程排除目录功能实践,

sync -avz --exclude={b,d} [email protected]::games  /tmp/tony --password-file=/etc/rsync.password

数据备份排除文件或目录

--exclude-from=( 排除文件)  exclude_file

守护进程来创建备份目录.

适用场景,将本地的文件备份到远程的存储服务器上.命令:

rsync -avz /tmp/tony/ [email protected]::games/op/   --password-file=/etc/rsync.password 

[root@backup games]# ls -l op/
total 0
-rw-r--r-- 1 rsync rsync 0 Dec 5 14:32 a
-rw-r--r-- 1 rsync rsync 0 Dec 5 14:32 c

###守护进程访问控制设置

 ###无差异备份同步操作 , --delete参数

###守护进程的列表功能配置.

list=true   这是开启 备份的模块名称

rsync [email protected]::games  --password-file=/etc/rsync.password

#启动rsync 指定端口和配置文件

rsync --daemon --port 8888 --config=xxxx 指定是别的rsync服务配置文件信息

 

标签：tmp,Rsync,--,备份,rsync,etc,定时,backup
From： https://www.cnblogs.com/Enzoo/p/10071339.html