Linux进阶命令-rsync

作者介绍：简历上没有一个精通的运维工程师。希望大家多多关注作者，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

经过上一章Linux日志的讲解，我们对Linux系统自带的日志服务已经有了一些了解。我们接下来将讲解一些进阶命令，主要从以下几个方面来讲解：一些系统操作，系统查看处理，Linux文本处理，逻辑判断，重定向，网络传输，服务启动，文件句柄等内容。通过这些操作，让你对Linux的操作更加得心应手，具体分成以下章节进行讲解：

Linux进阶命令-echo&date&alias

Linux进阶命令-top

Linux进阶命令-ps&kill

Linux进阶命令-sort&wc

Linux进阶命令-sed&split

Linux进阶命令-awk&uniq

Linux进阶命令-逻辑或&逻辑与

Linux进阶命令-重定向

Linux进阶命令-scp

Linux进阶命令-rsync(本章节)

Linux进阶命令-rsync-daemon

Linux进阶命令-nohup&screen

Linux进阶命令-lsof

Linux进阶命令-小结

在上一节我们讲scp的时候，不能续传，不能增量，那么有什么命令可以实现以上2个功能，它就是rsync。

如果使用iso自己安装最小版本的系统，默认是没有没有这个命令的。如果是购买的公有云/私有云，一般都会有，如果没有可以直接安装：yum -y install rsync。

rsync

命令介绍

RSYNC（Remote Sync）是一个用于远程文件同步和备份的开源工具。它通过差异化传输算法，仅传输文件的变化部分，从而实现高效的文件同步和备份。以下是一些关键特点和用法介绍：

1. 增量传输：RSYNC使用一种增量传输算法，仅传输源文件和目标文件之间的差异部分，而不是传输整个文件。这极大地减少了传输的数据量，提高了传输速度。

2. 多种同步模式：RSYNC支持多种同步模式，包括本地同步、远程同步以及本地与远程之间的同步。它可以在本地文件系统内同步文件，也可以通过SSH等协议进行远程同步。

3. 增量备份：RSYNC可以用作增量备份工具，它可以按需备份源文件的变化部分，而不需要每次都备份整个文件。这使得备份过程更加高效，并节省了存储空间。

4. 安全传输：RSYNC可以通过SSH进行传输，确保数据在传输过程中的安全性和保密性。

5. 保留文件属性：RSYNC默认情况下会保留文件的属性和权限，包括时间戳、所有者和组等信息，确保在目标端文件与源文件保持一致。

6. 过滤功能：RSYNC支持通过过滤规则来选择性地同步或排除某些文件或目录。这使得用户可以根据自己的需求进行文件过滤和同步。

命令参数

当使用RSYNC命令时，可以根据不同的需求使用不同的参数来控制其行为。以下是一些常用的RSYNC参数的解释：

• -a（归档模式）：该参数用于保持文件的所有属性，包括时间戳、权限、所有者等。它是一个常用的参数，用于在源和目标之间保持完全一致。

• -v（详细模式）：该参数用于显示详细的输出信息，包括传输的文件列表、文件大小和传输速度等。

• -r（递归模式）：该参数用于递归地同步目录和子目录，确保源和目标目录之间的所有文件都被同步。

• -z（压缩模式）：该参数用于对传输的数据进行压缩，以减少传输的数据量。这在网络传输较慢的情况下可以提高传输速度。

• -P（进度模式）：该参数用于显示传输的进度信息，包括已传输的文件数量和总体进度等。

• -u（更新模式）：该参数用于仅同步源文件中新增或更新的文件，而不处理目标文件中已存在且没有变化的文件。

• --delete（删除模式）：该参数用于在目标目录中删除与源目录中不同的文件。这对于保持目标目录与源目录完全一致很有用。

• --exclude（排除模式）：该参数用于指定要排除的文件或目录，以避免将其同步到目标目录中。

• --bwlimit=速度（带宽限制）：该参数用于限制传输速度，以防止RSYNC占用过多的带宽。

常见用法

在使用rsync命令时，可以通过不同的路径来指定源文件/目录和目标文件/目录。以下是一些常见的rsync方法路径的示例：

本地文件同步：

rsync /path/to/source /path/to/destinationx

在本地文件系统内进行同步，其中/path/to/source是源文件/目录的路径，/path/to/destination是目标文件/目录的路径。

远程文件同步（使用SSH）：

rsync -e ssh user@remote:/path/to/source /path/to/destination

通过SSH协议远程同步文件，其中user是远程服务器的用户名，remote是远程服务器的地址，/path/to/source是远程源文件/目录的路径，/path/to/destination是本地目标文件/目录的路径。

本地与远程之间的文件同步（使用SSH）：

rsync -e ssh /path/to/local/source user@remote:/path/to/destination

在本地与远程服务器之间同步文件，其中/path/to/local/source是本地源文件/目录的路径，user是远程服务器的用户名，remote是远程服务器的地址，/path/to/destination是远程目标文件/目录的路径。

同步文件夹：

rsync -av /path/to/source/ /path/to/destination/

在同步文件夹时，需要在源和目标路径末尾加上斜杠/，以确保将整个源文件夹同步到目标文件夹。

其实从前面方式来看，我们可以看出来，谁在前面，谁就是源；谁在后面谁就是目标。

#这个是作者最常用的命令
rsync -avz -e 'ssh -p xxx' user@1.1.1.1:/data/test/  /data/test/
#如果端口和用户也是一致的话，是可以省略的
rsync -avz 1.1.1.1:/data/test/  /data/test/

重点解释(总结)

1.权限控制

-a 走天下

#特别注意，如果复制的时候是用的root命令，而源文件是apache用户，目标服务器必须要有对应的用户，否则会复制过去的文件所有者会异常。
-a 
在rsync中，-a参数和-p、-o、-t、-g参数有一些区别。
-a参数是归档模式，它等价于-rlptgoD参数的组合。归档模式会保持文件的所有属性，包括权限、所有者、所属组、时间戳等，并且会递归地复制子目录和链接。
-p参数仅保持文件的权限。它会确保目标文件和源文件具有相同的权限，但不会保持其他属性，例如所有者、所属组和时间戳。
-o参数仅保持文件的所有者。它会确保目标文件和源文件具有相同的所有者，但不会保持其他属性。
-t参数仅保持文件的时间戳。它会确保目标文件和源文件具有相同的修改时间和访问时间，但不会保持其他属性。
-g参数仅保持文件的所属组。它会确保目标文件和源文件具有相同的所属组，但不会保持其他属性。

2.ssh端口不一致

-e 'ssh -p xxx'
#在远程复制的过程中，如果本地和远程机器端口一致的情况下，可不使用这个参数，如果不一致才需要加上这个参数。
#同理如果本地和远程账号不一样，账号也是可以省略的。

3.软链保持

-L
#默认情况下，rsync在复制软连的时候会把软连关系复制过去，而不会复制内容本身，如果加上-L参数，则会把真实文件复制过去，但是这个会破坏软连，也就是不原来软连的文件或目录会变成真实的文件和目录。

4."/" 问题

rsync -a /etc/httpd 192.168.0.17:/root/httpddd
#会把httpd目录本身及下面的内容复制到/root/httpddd/目录下，形成httpd目录

rsync -a /etc/httpd/ 192.168.0.17:/root/httpddd
#会把httpd目录下的内容复制到/root/httpddd/目录下

rsync -a /etc/httpd 192.168.0.17:/root/httpddd/
#会把httpd目录本身及下面的内容复制到/root/httpddd/目录下，形成httpd目录

rsync -a /etc/httpd/ 192.168.0.17:/root/httpddd/
#会把httpd目录下的内容复制到/root/httpddd/目录下

总结下来就是，如果源不带"/", 则会复制目录本身及内容，源带了"/",则是复制目录下的内容到目标目录下。如果目标目录不存在，则会创建对应的目录。

5.绝对一致的问题

--delete
#默认不加的情况下，比如源目录里面有 a,b,c 3个目录，如果目标复制里面有 1,2,3 3个目录，如果默认参数，复制源目录以后，目标目标会存在 a,b,c,1,2,3 共6个目录。
#如果加了该参数，则会删除目标目录里面已经存在的 1,2,3 3个目录只保留源目录里面的a,b,c 3个目录，从而保证目标源绝对一致。

总结下就是不加，我只负责把我要传的内容传过去就行，加了就会保持绝对一致。

6.增量问题

#rsync默认就是增量同步，但是如果出现第一次同步源目录是 a,b,c 3个目录,同步到目标目录以后
#第二次同步的内容是 a,b,d 3个目录，新创建了一个目录d，删除了一个目录c，为了保证两边目录的绝对一致，但是我希望删除的目录c可以保留在备份服务器上一个特定的地方。
rsync -avz --delete  --backup --backup-dir=/root/ab/  /root/xyz/ 192.168.0.17:/root/abcd

坑点：如果在/root/xyz/ 删除 a，b，c 都是空目录，他是不会在目标服务器文件移动到/root/ab目录的。

运维小路

一个不会开发的运维！一个要学开发的运维！一个学不会开发的运维！欢迎大家骚扰的运维！

关注微信公众号《运维小路》获取更多内容。