Linux下实现文件双向同步

一、Unison简介
　　Unison是Windows、Linux以及其他Unix平台下都可以使用的文件同步工具，它能使两个文件夹（本地或网络上的）保持内容的一致。Unison拥有与其它一些同步工具或文件系统的相同的特性，但也有自身的特点：
　　1.跨平台使用；
　　2.对内核和用户权限没有特别要求；
　　3.Unison是双向的，它能自动处理两分拷贝中更新没有冲突的部分，有冲突的部分将会显示出来让用户选择更新策略；
　　4.只要是能连通的两台主机，就可以运行unison，可以直接使用socket连接或安全的ssh连接方式，对带宽的要求不高，使用类似rsync的压缩传输协议。
　　环境如下：
　　vm1:10.13.114.19
　　vm2:10.13.114.32
　　二、编译安装Unison
　　Linux下通过源码包编译安装Unison时，需要用到Objective Caml compiler。
　　通过以下方式安装
　　[root@vm1 ~]# wget http://caml.inria.fr/pub/distrib/ocaml-3.12/ocaml-3.12.1.tar.gz
　　[root@vm1 ~]# tar -xzvf ocaml-3.12.1.tar.gz
　　[root@vm1 ~]# cd ocaml-3.12.1
　　[root@vm1 ocaml-3.12.1]# ./configure
　　[root@vm1 ocaml-3.12.1]# make world opt
　　[root@vm1 ocaml-3.12.1]# make install
　　编译安装Unison
　　[root@vm1 ~]# wget http://www.seas.upenn.edu/~bcpierce/unison//download/releases/stable/unison-2.40.63.tar.gz
　　[root@vm1 ~]# tar -xzvf unison-2.40.63.tar.gz
　　[root@vm1 ~]# cd unison-2.40.63
　　[root@vm1 unison-2.40.63]# make UISTYLE=text
　　[root@vm1 unison-2.40.63]# make install
　　在执行make install的过程中，可能会出现以下错误提示：
　　mv: cannot stat '/root/bin//unison': No such file or directory
　　make: [doinstall] Error 1 （ignored）
　　cp unison /root/bin/
　　cp: cannot create regular file '/root/bin/': Is a directory
　　make: *** [doinstall] Error 1
　　出现错误的原因在与Unison默认是将文件Copy到/root/bin目录，但Linux默认是没有该目录的，因此我们需要将生成的可执行文件unison复制到系统的PATH目录。
　　[root@vm1 unison-2.40.63]# cp unison /usr/local/bin
　　将可执行文件unison上传到远程主机10.13.114.32
　　[root@vm1 unison-2.40.63]# scp unison root@10.13.114.32:/root/
　　通过SSH登陆到远程主机，再将unison复制到vm2的PATH目录
　　[root@vm2 ~]#cp unison /usr/local/bin
　　三、配置ssh key信任
　　建议通过普通用户进行操作，理由是通过root操作本身就危险，免密码登陆的root就更危险了。
　　在两台服务器上创建admin用户
　　[root@vm1 ~]# useradd -m admin
　　[root@vm1 ~]# passwd 12345
　　[root@vm2 ~]# useradd -m admin
　　[root@vm2 ~]# passwd 123456
　　在vm1上创建key并配置vm2的信任
　　[root@vm1 ~]# su – unison
　　[admin@vm1 ~]$ ssh-keygen -t rsa
　　在提示保存私钥（key）和公钥（public key）的位置时，使用默认值；
　　在提示是否需要私钥密码（passphrase）时，直接敲回车，即不使用私钥密码。
　　之后，将生成一对密钥，id_rsa（私钥文件）和id_rsa.pub（公钥文件），保存在/home/unison/.ssh/目录下。
　　将公钥添加到vm2的 authorized_keys 文件中
　　将文件上传到vm2
　　[admin@vm1 ~]$ scp ~/.ssh/id_rsa.pub unison@10.13.114.32:/home/unison/
　　使用rsync用户SSH到登陆到远程主机，并将公钥添加到 authorized_keys 文件中
　　[admin@vm2 ~]$ mkdir .ssh
　　[admin@vm2 ~]$ chmod 700 .ssh
　　[admin@vm2 ~]$ mv ~/id_rsa.pub ~/.ssh/authorized_keys
　　[admin@vm2 ~]$ chmod 600 ~/.ssh/authorized_keys
　　同理，执行以下步骤在vm2上创建key并配置vm1的信任
　　[root@vm2 ~]# su – admin
　　[admin@vm2 ~]$ ssh-keygen -t rsa
　　将文件上传到vm1
　　[admin@vm2 ~]$ scp ~/.ssh/id_rsa.pub unison@10.13.114.19:/home/unison/
　　使用rsync用户SSH到登陆到vm1，并将公钥添加到 authorized_keys 文件中
　　[admin@vm1 ~]$ mv ~/id_rsa.pub ~/.ssh/authorized_keys
　　重启SSH服务
　　[root@vm1 ~]# /etc/init.d/sshd restart
　　[root@vm2 ~]# /etc/init.d/sshd restart
　　四、Unison的配置与使用
　　在两台服务器上创建test目录，用于测试
　　[root@vm1 ~]# su - admin
　　[unison@vm1 ~]$ mkdir test
　　[root@vm2 ~]# su - unison
　　[unison@vm2 ~]$ mkdir test
　　在两台服务器上分别执行一次unison，如果出现提示确认，则直接敲回车选择默认值
　　[unison@vm1 ~]$ unison /home/admin/test/ ssh://admin@10.13.114.32//home/admin/test/
　　[unison@vm2 ~]$ unison /home/admin/test/ ssh://admin@10.13.114.19//home/admin/test/
　　修改两台服务器的unison配置文件，输入以下内容
　　[unison@vm1 ~]$ vim /home/unison/.unison/default.prf
　　1.#Unison preferences file 2.root = /home/admin/test 3.root = ssh://admin@10.13.114.32//home/admin/test/ 4.#force = 5.#ignore = 6.batch = true 7.#repeat = 1 8.#retry = 3 9.owner = true 10.group = true 11.perms = -1 12.fastcheck = false 13.rsync = false 14.sshargs = -C 15.xferbycopying = true 16.log = true 17.logfile = /home/unison/.unison/unison.log [unison@vm2 ~]$ vim /home/unison/.unison/default.prf
　　1.#Unison preferences file 2.root = /home/admin/test 3.root = ssh://admin@10.13.114.19//home/admin/test/ 4.#force = 5.#ignore = 6.batch = true 7.#repeat = 1 8.#retry = 3 9.owner = true 10.group = true 11.perms = -1 12.fastcheck = false 13.rsync = false 14.sshargs = -C 15.xferbycopying = true 16.log = true 17.logfile = /home/unison/.unison/unison.log 相关注解如下：
　　force表示会以本地所指定文件夹为标准，将该目录同步到远端。这里需要注意，如果指定了force参数，那么Unison就变成了单项同步了，也就是说会以force指定的文件夹为准进行同步，类似与rsync。
　　Unison双向同步基本原理是：假如有A B两个文件夹，A文件夹把自己的改动同步到B，B文件夹也把自己的改动同步到A，最后A B两文件夹的内容相同，是AB文件夹的合集。
　　Unison双向同步的一个缺点是，对于一个文件在两个同步文件夹中都被修改时，unison是不会去同步的，因为unison无法判断以那个为准。
　　ignore = Path表示忽略指定目录，即同步时不同步它。
　　batch = true，表示全自动模式，接受缺省动作，并执行。
　　-fastcheck true 表示同步时仅通过文件的创建时间来比较，如果选项为false，Unison则将比较两地文件的内容。
　　log = true 表示在终端输出运行信息。
　　logfile 指定输出的log文件。
　　另外，Unison有很多参数，这里仅介绍常用的几个，详细的请参看Unison手册。
　　-auto //接受缺省的动作，然后等待用户确认是否执行。
　　-batch //batch mode, 全自动模式，接受缺省动作，并执行。
　　-ignore xxx //增加 xxx 到忽略列表中
　　-ignorecase [true|false|default] //是否忽略文件名大小写
　　-follow xxx //是否支持对符号连接指向内容的同步
　　owner = true //保持同步过来的文件属主
　　group = true //保持同步过来的文件组信息
　　perms = -1 //保持同步过来的文件读写权限
　　repeat = 1 //间隔1秒后，开始新的一次同步检查
　　retry = 3 //失败重试
　　sshargs = -C //使用ssh的压缩传输方式
　　xferbycopying = true"
　　-immutable xxx //不变目录，扫描时可以忽略
　　-silent //安静模式
　　-times //同步修改时间
　　-path xxx 参数 //只同步 -path 参数指定的子目录以及文件，而非整个目录，-path 可以多次出现。
　　PS：Windows下的unison配置文件默认位于C:\Documents and Settings\currentuser\.unison目录，默认的配置文件名是default.prf。
　　五、测试
　　首先分别在server1与server2的/home/unison/test目录下创建文件或目录，然后在server1上执行unison，接着如果在server1与server2上都能看到各自创建的文件，就说明同步成功。
　　分别在server1与server2上创建文件
　　[unison@server1 ~]$ cd test
　　[unison@server1 test]$ touch 1.txt touch 3.txt
　　[unison@server2 ~]$ cd test
　　[unison@server2 test]$ touch 2.txt touch 4.txt
　　在server1上执行unison
　　[unison@server1 ~]$ unison
　　在server1与server2上查看文件是否同步
　　[unison@server1 ~]$ cd test
　　[unison@server1 test]$ ls
　　1.txt 2.txt 3.txt 4.txt
　　[unison@server2 ~]$ cd test
　　[unison@server2 test]$ ls
　　1.txt 2.txt 3.txt 4.txt
　　均看到了“1.txt 2.txt 3.txt 4.txt”所有文件，说明文件同步已经成功！
　　注意：第一次SSH连接的时候可能需要输入一次密码，之后就不需要输入了。
　　六、定期或实时执行同步
　　如果想要定期执行，则通过crontab计划任务来实现，例如通过以下方式设置每5分钟执行一次
　　[root@server1 ~]# su - unison
　　[unison@server1 ~]$ crontab -e
　　1    */5 * * * * /usr/local/bin/unison
　　如果想要实时同步，则需要结合inotify-tools来实现，具体实现方式请参考我的这一篇文章：
　　通过rsync+inotify-tools+ssh实现触发式远程实时同步