Linux下rsync(本地、远程)文件同步方式

 更新时间：2024年01月09日 09:30:40   作者：罗德斯  
这篇文章主要介绍了Linux下rsync(本地、远程)文件同步方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教

目录

• rsync介绍
• rsync特点
• rsync的选项说明
• 用法
• 拓展
• 总结

rsync介绍

sync同步：

刷新文件系统缓存，强制将修改过的数据块写入磁盘，并且更新超级快。

一般重启系统前执行sync命令

• async：将数据先缓存在缓冲区，再周期性（一般是30s）的去同步到磁盘 。性能好，但是不能保证数据的安全性
• rsync：远程同步，remote synchronous

rsync特点

1.可以镜像保存整个目录树和文件系统

2.可以保留原有的权限，owner，group，时间，软硬链接，文件属性等信息

3.传输效率高，只比较变化的

4.支持匿名传输，也可以做验证，加强安全

rsync的选项说明

• -v：显示rsync过程中详细信息。可以使用”-vvvv”获取更详细信息。
• -P：显示文件传输的进度信息。(实际上”-P”=”–partial –progress”，其中的”–progress”才是显示进度信息的)。
• -n --dry-run ：仅测试传输，而不实际传输。常和”-vvvv”配合使用来查看rsync是如何工作的。
• -a --archive ：归档模式，表示递归传输并保持文件属性。等同于”-rtopgDl”。
• -r --recursive：递归到目录中去。
• -t --times：保持mtime属性。强烈建议任何时候都加上”-t”，否则目标文件mtime会设置为系统时间，导致下次更新：检查出mtime不同从而导致增量传输无效。
• -o --owner：保持owner属性(属主)。
• -g --group：保持group属性(属组)。
• -p --perms：保持perms属性(权限，不包括特殊权限)。
• -D：是”–device –specials”选项的组合，即也拷贝设备文件和特殊文件。
• -l --links：如果文件是软链接文件，则拷贝软链接本身而非软链接所指向的对象。
• -z ：传输时进行压缩提高效率。
• -R --relative：使用相对路径。意味着将命令行中指定的全路径而非路径最尾部的文件名发送给服务端，包括它们的属性。用法见下文示例。
• –size-only：默认算法是检查文件大小和mtime不同的文件，使用此选项将只检查文件大小。
• -u --update：仅在源mtime比目标已存在文件的mtime新时才拷贝。注意，该选项是接收端判断的，不会影响删除行为。
• -d --dirs：以不递归的方式拷贝目录本身。默认递归时，如果源为”dir1/file1″，则不会拷贝dir1目录，使用该选项将拷贝dir1但不拷贝file1。
• –max-size：限制rsync传输的最大文件大小。可以使用单位后缀，还可以是一个小数值(例如：”–max-size=1.5m”)
• –min-size：限制rsync传输的最小文件大小。这可以用于禁止传输小文件或那些垃圾文件。
• –exclude：指定排除规则来排除不需要传输的文件。
• –delete：以SRC为主，对DEST进行同步。多则删之，少则补之。注意”–delete”是在接收端执行的，所以它是在：exclude/include规则生效之后才执行的。
• -b --backup：对目标上已存在的文件做一个备份，备份的文件名后默认使用”~“做后缀。
• –backup-dir：指定备份文件的保存路径。不指定时默认和待备份文件保存在同一目录下。
• -e：指定所要使用的远程shell程序，默认为ssh。
• –port：连接daemon时使用的端口号，默认为873端口。
• –password-file：daemon模式时的密码文件，可以从中读取密码实现非交互式。注意，这不是远程shell认证的密码，而是rsync模块认证的密码。
• -W --whole-file：rsync将不再使用增量传输，而是全量传输。在网络带宽高于磁盘带宽时，该选项比增量传输更高效。
• –existing：要求只更新目标端已存在的文件，目标端还不存在的文件不传输。注意，使用相对路径时如果上层目录不存在也不会传输。
• –ignore-existing：要求只更新目标端不存在的文件。和”–existing”结合使用有特殊功能，见下文示例。
• –remove-source-files：要求删除源端已经成功传输的文件。

用法

1.本地同步：

rsync -a 源目录或文件 目标目录或文件
例如：
rsync -a /dir1/ /dir2/     #dir1下所有文件同步到dir2下

2.远程同步：

rsync -av root@192.168.1.77:/etc/hosts /dir1/     #j将192.168.1.77服务器/etc/hosts文件拷贝到本地/dir1文件夹下

默认是需要输入密码才能同步，因为rsync基于ssh服务

注：免密登录，这只密钥对

3.将rsync作为服务，进行同步(远程服务器端进行如下配置）

创建配置文件：touch /etc/rsyncd.conf

编辑/etc/rsyncd.conf

[ava]             #ava为模块名
log file = /var/log/rsync.log
path=/dir1        #path为同步目录
uid = root       不设置uid和gid的话会报错：有部分文件同步失败，提示：`permission denied`      
gid = root

启动：rsync --daemon

验证是否启动：

netstat -nltup | grep rsync   #可以看到端口号是873

手动进行备份操作：

本地端执行同步，从192.168.1.77同步模块名为ava的文件到本地/tmp/目录下：

rsync -av root@192.168.1.77::ava /tmp/

上述命令是手动实现备份功能，如需自动备份看下：

自动备份：

1.编写脚本

vim rsync_ava.sh

脚本内容：

#!/bin/bash
rsync -av root@192.168.1.77::ava /tmp/ &>/dev/null

给脚本添加可执行权限

chmod +x rsync_ava.sh

2.执行定时任务

编写计划

crontab -e

03 01 * * * 脚本路径      #每天1时3分执行备份脚本

查询定时计划：

crontab -l

拓展

实时同步备份（服务端有文件改变就备份）：rsync+inotify

1.安装inotify软件

tar xf inotify-tools-3.13.tar.gz -C /usr/src/
cd /usr/src/inotify-tools-3.13/
./configure
make
make install

安装后会产生两条命令：

/usr/local/bin/inotifywait        #等待
/usr/local/bin/inotifywatch     #看守

2.编写脚本实现同步

#!/bin/bash
/usr/local/bin/inotifywait -mrq -e modify,delete,create,attrib,move /dir1
| while read events
			do
				rsync -a --delete /dir1 /dir2/
				echo "'date +%F\ %T'出现事件$events"  >> /var/log/rsync.log
2>&1
		done

总结

以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。

您可能感兴趣的文章:

• Linux用户磁盘配额设置方法
• 用rsync实现windows与linux文件同步的方法
• Linux单目录挂载多块磁盘的操作步骤
• Linux中的LUN、磁盘、LVM和文件系统映射使用
• linux服务器如何查看每个用户或者当前用户的磁盘占用量及文件同步

• Linux
• rsync
• 文件同步

相关文章

• Linux ssh服务器配置代码实例

  这篇文章主要介绍了Linux ssh服务器配置代码实例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 2020-09-09

• 关于g++和gcc的相同点和区别详解

  下面小编就为大家带来一篇关于g++和gcc的相同点和区别详解。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧 2017-01-01

• 虚拟机中ubuntu不能联网问题的解决方法

  这篇文章主要为大家详细介绍了虚拟机中ubuntu不能联网问题的解决方法，具有一定的参考价值，感兴趣的小伙伴们可以参考一下 2019-03-03

• Linux定时任务Crontab的使用方法

  这篇文章主要为大家详细介绍了Linux定时任务Crontab的使用方法，具有一定的参考价值，感兴趣的小伙伴们可以参考一下 2017-12-12

• linux下制作ISO文件

  本文给大家分享的是在linux系统中制作ISO文件的2种方法，非常简单实用，有需要的小伙伴可以参考下 2018-04-04

• linux备份与恢复基础知识

  备份会改变atime，tar,cpio,dd都会这样做，dump通过原始设备来读取文件系统，因此它不会改变atime. 2009-03-03

• CentOS下使用Squid架设CDN服务器的方法

  这篇文章主要介绍了CentOS下使用Squid架设CDN服务器的方法,需要的朋友可以参考下 2014-07-07

• 在ubuntu下查看显卡驱动是否已经成功安装的方法

  今天小编就为大家分享一篇在ubuntu下查看显卡驱动是否已经成功安装的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧 2019-06-06

• CentOS 7如何快速开放端口

  这篇文章主要为大家详细介绍了CentOS 7如何快速开放端口，如何使用firewalld开放Linux端口，具有一定的参考价值，感兴趣的小伙伴们可以参考一下 2017-01-01

• linux查看用过的命令方法总结

  在本篇文章里小编给大家分享了关于linux怎么查看用过的命令的具体方法和步骤，需要的朋友们参考下。 2019-06-06

最新评论