Linux_Rsync远程同步备份服务器

Remote Sync

功能：
1. 可以镜像保存整个目录树和文件系统
2. 很容易做到保持原来文件的权限，时间，属主，软硬连接等
3. 可使用rcp,ssh等方式来传输文件，也可直接通过socket来进行连接
4. 支持匿名传输
General use for remote backup and backup localhost file into remote host(auto-periodical execute)
Distinction of backup and copy:
1. backup:Update the data.
2. copy:Move all data to other space.
RSync可以实现增量备份，而且可以同步更新数据，实时备份。RSync主机同步网络YUM源，本地局域网同步RSync主机YUM源。

同步的类型

本地模式

将a目录内的文件通过rsync到另一个b目录
example：

rsync -av test /tmp

Attention:
a. /tmp/:不将tmp目录备份，只备份tmp目录下的内容
b. /tmp：将tmp目录及其以下的内容完全备份

远程模式

底层是使用SSH协议
example：

rsync -av /tmp root@GoalHostIP:/root

RSync列表模式

example:

rsync -a IP:cisco

RSync 服务模式：

Rsync同步源、SSH源 –> 备份文件的源主机

Setup RSync service

step1. Create RSync service configuration file by manual
vim /etc/rsyncd.conf

        #RSync configuration file
        #Welcome file
        motd file = /etc/rsyncd.motd
        read>list = yes
        uid=root
        gid=root
        use chroot = no
        max connections = 5
        log file = /var/log/rsyncd.log
        pid file = /var/run/rsyncd.pid
        lock file = /var/run/rsyncd/lock
        #Specify share directory
        [wwwroot]
        path = /var/www/html
        readonly = yes
        auth users = jmilk
        #user authentication file, store userName and password
        secrets file = /etc/rsyncd.db
        comment = rsync directory

step2. Create password file

echo "jmilk:fanguiju" >> /etc/rsyncd.db
chmod 600 /etc/rsyncd.db

step3. Start rsync service

rsync --deamon

How to use the rsync commands

rsync指令选项：

    -av  同步并且显示详细信息
    -z     在传输备份是进行压缩
    --delete 将目的位置中有而源位置中没有的文件删除
    --password-file=/etc/server  指定存放密钥对的位置
    -H   保留硬链接

example:

#use rsync source:
rsync -avzH --delete backuper@:ip::wwwroot  /var/www/html  --> ::shareDirectory
#use ssh source in the client:
rsync -avzH root@RSyncServerIP:/syncDirectory    /localhostBackupDirecttory

SSH Source create Key Pair:

ssh-keygen -t rsa
ssh-copy-id root@RSyncServerIP

RSync Source create Key Pair:
vim /etc/rsyncd.conf

RSYNC_PASSWORD="pwd123"

RSync backup:

rsync -avzH -b --backup-dir=old root@SyncServerIP:/syncDirectory    /localhostBackupDirectory
        #old --> 只是备份有修改过的文件到该目录中，并且创建在本地指定的/localostBackupDirectory目录中
        #-b --> backup mode
rsync -avzH -b --backup-dir='date+ "%Y%M%B%H%M%S"' root@SyncServerIP:/syncDirectory    /localhostBackupDirectory #在每次更新后都生成一个只包含修改部分的备份文件
rsync -avzH -b --backup-dir='date+ "%Y%M%B%H%M%S"' --exclude=up root@SyncServerIP:/syncDirectory    /localhostBackupDirectory #将备份目录中包含up的文件或子目录排除不备份

inotify+rsync Real-time sync

inotify机制:监控文件系统的变化
Software:inotofy-tools(安装在RSyncServer)
inotify kernel parameter:

max_queue_events:监控队列大小
max_user_instances:最多监控例数
max_user_watches:每个实例最多的监控个数

Setup inotify

tar zxvf inotify-tools -C /usr/local
cd /usr/local/inotify-tools
./confugure && make && make install
inotifywait -mrq -e modify,create,move,delete  /data/ --exclude=/data/up/
        #wait 持续监控
        #-e     指定监控事件的类型
        #--exclude  过滤不想监控的目录或内容

BUG：编译安装的过程中可能会出现执行以上指令后出现: libinotifytools.so.o:cannot open shared object file error
解决办法：ln -S /usr/local/lib/libinotifytools.so.o /usr/lib64