使用 `rsync + inotify` 实现实时文件同步：简单又高效

使用 rsync + inotify 实现实时文件同步：简单又高效

在日常的运维工作中，文件的实时同步是一个非常常见的需求，比如：

• 网站更新：同步静态资源到多台服务器。
• 备份数据：将生产数据实时备份到异地存储。
• 日志传输：将日志实时同步到集中分析服务器。

为了高效实现这些需求，我们可以将强大的文件同步工具 rsync 和实时文件监控工具 inotify 结合起来，轻松实现实时文件同步。

接下来，我会用通俗的语言和实际例子，带你了解它们的作用、使用场景，以及如何配置。

一、rsync 和 inotify 的作用

1. rsync 是什么？

rsync 是一个快速、灵活的文件同步工具，支持本地与远程之间的数据同步。它的核心特点包括：

• 增量传输：只同步发生变化的部分，大大节省带宽。
• 支持压缩：传输过程中可以启用压缩，进一步提升效率。
• 多种协议：支持通过 SSH、rsync 协议等进行传输。

简单来说，rsync 是文件同步的高手。

2. inotify 是什么？

inotify 是 Linux 提供的文件系统监控工具，可以实时捕捉文件的变化（如创建、删除、修改等）。通过它，你可以知道哪些文件发生了变化，从而触发进一步操作。

如果说 rsync 是执行同步的工具，那么 inotify 就是触发同步的侦察兵。

二、rsync + inotify 的典型使用场景

1. 实时备份

• 将重要数据实时同步到备份服务器，防止数据丢失。

2. 多节点资源同步

• 多台 Web 服务器共享同一套静态资源，确保内容一致。

3. 日志集中管理

• 将分布式系统中的日志实时同步到中央服务器，方便分析和排查问题。

三、搭建一个简单的实时同步方案

我们以一个具体案例来讲解：将本地目录 /data 的文件实时同步到远程服务器上的 /backup 目录。

1. 环境准备

假设：

• 本地服务器 IP：192.168.1.100
• 远程服务器 IP：192.168.1.200
• 用户名：user
• 本地目录：/data
• 远程目录：/backup

需要安装的工具：

• rsync
• inotify-tools

安装命令（以 Ubuntu 为例）：

sudo apt update
sudo apt install rsync inotify-tools

2. 使用 rsync 进行初始同步

在实现实时同步之前，先用 rsync 将现有文件同步到远程服务器。

命令：

rsync -avz /data/ user@192.168.1.200:/backup

参数说明：

• -a：归档模式，保留文件属性。
• -v：显示详细信息。
• -z：启用压缩，节省带宽。

执行后，本地的 /data 文件夹内容会被同步到远程的 /backup 文件夹。

3. 配置 inotify 实现实时同步

编写脚本：

新建一个脚本文件 sync.sh：

#!/bin/bash

SRC_DIR="/data"
DEST_USER="user"
DEST_HOST="192.168.1.200"
DEST_DIR="/backup"

inotifywait -mrq -e modify,create,delete,move $SRC_DIR | while read event
do
  rsync -avz --delete $SRC_DIR/ $DEST_USER@$DEST_HOST:$DEST_DIR
done

脚本说明：

1. inotifywait 参数：
   • -m：持续监听。
   • -r：递归监听子目录。
   • -q：简化输出。
   • -e：指定需要监听的事件（如文件修改、创建、删除、移动）。
2. rsync 参数：
   • --delete：保持源和目标一致，删除目标中多余的文件。

赋予脚本执行权限：

chmod +x sync.sh

运行脚本：

./sync.sh

现在，当本地 /data 目录中的文件发生任何变化时，inotify 会捕捉到事件，并触发 rsync 同步到远程服务器。

4. 后台运行脚本

为了让同步脚本一直运行，可以使用 nohup 或 systemd。

使用 nohup：

nohup ./sync.sh > sync.log 2>&1 &

• 脚本输出会写入 sync.log，脚本在后台持续运行。

使用 systemd：

1. 创建一个服务文件 /etc/systemd/system/rsync_inotify.service：

   [Unit]
   Description=Rsync + Inotify File Sync Service
   After=network.target
   
   [Service]
   ExecStart=/path/to/sync.sh
   Restart=always
   
   [Install]
   WantedBy=multi-user.target
   

2. 启用并启动服务：

   sudo systemctl enable rsync_inotify
   sudo systemctl start rsync_inotify
   

四、注意事项

1. 权限问题：
   确保本地和远程用户有读写权限，必要时使用 SSH 密钥认证避免频繁输入密码。

2. 文件变化频率：
   如果文件变化非常频繁，rsync 可能在短时间内被多次触发，导致资源浪费。可以考虑设置延迟或批量处理。

3. 带宽优化：

   • 使用 -z 参数压缩传输数据。
   • 排除不必要同步的文件，使用 --exclude 参数。

4. 高可用性：
   如果需要更高可靠性，可以结合监控工具（如 supervisor 或 systemd）确保同步脚本持续运行。

五、总结

通过结合 rsync 和 inotify，我们可以轻松实现高效的实时文件同步。无论是网站部署、数据备份还是日志收集，这种方案都非常实用。

它的优势在于：

• 简单高效：rsync 增量传输配合 inotify 事件触发，资源消耗低。
• 灵活性强：可以根据需要定制同步规则和触发条件。

对于日常运维工作来说，这是一套既可靠又易于维护的解决方案。如果你有实时文件同步的需求，不妨动手试试吧！