首页 运维 网络学院 查看内容

Linux下实现文件双向同步

2011-7-19 11:04 500 0

摘要:   一、Unison简介  Unison是Windows、Linux以及其他Unix平台下都可以使用的文件同步工具,它能使两个文件夹(本地或网络上的)保持内容的一致。Unison拥有与其它一些同步工具...
关键词: Unison 同步 文件 root admin test vm ssh 目录 true

  一、Unison简介  Unison是Windows、Linux以及其他Unix平台下都可以使用的文件同步工具,它能使两个文件夹(本地或网络上的)保持内容的一致。Unison拥有与其它一些同步工具或文件系统的相同的特性,但也有自身的特点:  1.跨平台使用;  2.对内核和用户权限没有特别要求;  3.Unison是双向的,它能自动处理两分拷贝中更新没有冲突的部分,有冲突的部分将会显示出来让用户选择更新策略;  4.只要是能连通的两台主机,就可以运行unison,可以直接使用socket连接或安全的ssh连接方式,对带宽的要求不高,使用类似rsync的压缩传输协议。  环境如下:  vm1:10.13.114.19  vm2:10.13.114.32  二、编译安装Unison  Linux下通过源码包编译安装Unison时,需要用到Objective Caml compiler。  通过以下方式安装  [root@vm1 ~]# wget http://caml.inria.fr/pub/distrib/ocaml-3.12/ocaml-3.12.1.tar.gz  [root@vm1 ~]# tar -xzvf ocaml-3.12.1.tar.gz  [root@vm1 ~]# cd ocaml-3.12.1  [root@vm1 ocaml-3.12.1]# ./configure  [root@vm1 ocaml-3.12.1]# make world opt  [root@vm1 ocaml-3.12.1]# make install  编译安装Unison  [root@vm1 ~]# wget http://www.seas.upenn.edu/~bcpierce/unison//download/releases/stable/unison-2.40.63.tar.gz  [root@vm1 ~]# tar -xzvf unison-2.40.63.tar.gz  [root@vm1 ~]# cd unison-2.40.63  [root@vm1 unison-2.40.63]# make UISTYLE=text  [root@vm1 unison-2.40.63]# make install  在执行make install的过程中,可能会出现以下错误提示:  mv: cannot stat '/root/bin//unison': No such file or directory  make: [doinstall] Error 1 (ignored)  cp unison /root/bin/  cp: cannot create regular file '/root/bin/': Is a directory  make: *** [doinstall] Error 1  出现错误的原因在与Unison默认是将文件Copy到/root/bin目录,但Linux默认是没有该目录的,因此我们需要将生成的可执行文件unison复制到系统的PATH目录。  [root@vm1 unison-2.40.63]# cp unison /usr/local/bin  将可执行文件unison上传到远程主机10.13.114.32  [root@vm1 unison-2.40.63]# scp unison [email protected]:/root/  通过SSH登陆到远程主机,再将unison复制到vm2的PATH目录  [root@vm2 ~]#cp unison /usr/local/bin  三、配置ssh key信任  建议通过普通用户进行操作,理由是通过root操作本身就危险,免密码登陆的root就更危险了。  在两台服务器上创建admin用户  [root@vm1 ~]# useradd -m admin  [root@vm1 ~]# passwd 12345  [root@vm2 ~]# useradd -m admin  [root@vm2 ~]# passwd 123456  在vm1上创建key并配置vm2的信任  [root@vm1 ~]# su – unison  [admin@vm1 ~]$ ssh-keygen -t rsa  在提示保存私钥(key)和公钥(public key)的位置时,使用默认值;  在提示是否需要私钥密码(passphrase)时,直接敲回车,即不使用私钥密码。  之后,将生成一对密钥,id_rsa(私钥文件)和id_rsa.pub(公钥文件),保存在/home/unison/.ssh/目录下。  将公钥添加到vm2的 authorized_keys 文件中  将文件上传到vm2  [admin@vm1 ~]$ scp ~/.ssh/id_rsa.pub [email protected]:/home/unison/  使用rsync用户SSH到登陆到远程主机,并将公钥添加到 authorized_keys 文件中  [admin@vm2 ~]$ mkdir .ssh  [admin@vm2 ~]$ chmod 700 .ssh  [admin@vm2 ~]$ mv ~/id_rsa.pub ~/.ssh/authorized_keys  [admin@vm2 ~]$ chmod 600 ~/.ssh/authorized_keys  同理,执行以下步骤在vm2上创建key并配置vm1的信任  [root@vm2 ~]# su – admin  [admin@vm2 ~]$ ssh-keygen -t rsa  将文件上传到vm1  [admin@vm2 ~]$ scp ~/.ssh/id_rsa.pub [email protected]:/home/unison/  使用rsync用户SSH到登陆到vm1,并将公钥添加到 authorized_keys 文件中  [admin@vm1 ~]$ mv ~/id_rsa.pub ~/.ssh/authorized_keys  重启SSH服务  [root@vm1 ~]# /etc/init.d/sshd restart  [root@vm2 ~]# /etc/init.d/sshd restart  四、Unison的配置与使用  在两台服务器上创建test目录,用于测试  [root@vm1 ~]# su - admin  [unison@vm1 ~]$ mkdir test  [root@vm2 ~]# su - unison  [unison@vm2 ~]$ mkdir test  在两台服务器上分别执行一次unison,如果出现提示确认,则直接敲回车选择默认值  [unison@vm1 ~]$ unison /home/admin/test/ ssh://[email protected]//home/admin/test/  [unison@vm2 ~]$ unison /home/admin/test/ ssh://[email protected]//home/admin/test/  修改两台服务器的unison配置文件,输入以下内容  [unison@vm1 ~]$ vim /home/unison/.unison/default.prf  1.#Unison preferences file 2.root = /home/admin/test 3.root = ssh://[email protected]//home/admin/test/ 4.#force = 5.#ignore = 6.batch = true 7.#repeat = 1 8.#retry = 3 9.owner = true 10.group = true 11.perms = -1 12.fastcheck = false 13.rsync = false 14.sshargs = -C 15.xferbycopying = true 16.log = true 17.logfile = /home/unison/.unison/unison.log [unison@vm2 ~]$ vim /home/unison/.unison/default.prf  1.#Unison preferences file 2.root = /home/admin/test 3.root = ssh://[email protected]//home/admin/test/ 4.#force = 5.#ignore = 6.batch = true 7.#repeat = 1 8.#retry = 3 9.owner = true 10.group = true 11.perms = -1 12.fastcheck = false 13.rsync = false 14.sshargs = -C 15.xferbycopying = true 16.log = true 17.logfile = /home/unison/.unison/unison.log 相关注解如下:  force表示会以本地所指定文件夹为标准,将该目录同步到远端。这里需要注意,如果指定了force参数,那么Unison就变成了单项同步了,也就是说会以force指定的文件夹为准进行同步,类似与rsync。  Unison双向同步基本原理是:假如有A B两个文件夹,A文件夹把自己的改动同步到B,B文件夹也把自己的改动同步到A,最后A B两文件夹的内容相同,是AB文件夹的合集。  Unison双向同步的一个缺点是,对于一个文件在两个同步文件夹中都被修改时,unison是不会去同步的,因为unison无法判断以那个为准。  ignore = Path表示忽略指定目录,即同步时不同步它。  batch = true,表示全自动模式,接受缺省动作,并执行。  -fastcheck true 表示同步时仅通过文件的创建时间来比较,如果选项为false,Unison则将比较两地文件的内容。  log = true 表示在终端输出运行信息。  logfile 指定输出的log文件。  另外,Unison有很多参数,这里仅介绍常用的几个,详细的请参看Unison手册。  -auto //接受缺省的动作,然后等待用户确认是否执行。  -batch //batch mode, 全自动模式,接受缺省动作,并执行。  -ignore xxx //增加 xxx 到忽略列表中  -ignorecase [true|false|default] //是否忽略文件名大小写  -follow xxx //是否支持对符号连接指向内容的同步  owner = true //保持同步过来的文件属主  group = true //保持同步过来的文件组信息  perms = -1 //保持同步过来的文件读写权限  repeat = 1 //间隔1秒后,开始新的一次同步检查  retry = 3 //失败重试  sshargs = -C //使用ssh的压缩传输方式  xferbycopying = true"  -immutable xxx //不变目录,扫描时可以忽略  -silent //安静模式  -times //同步修改时间  -path xxx 参数 //只同步 -path 参数指定的子目录以及文件,而非整个目录,-path 可以多次出现。  PS:Windows下的unison配置文件默认位于C:\Documents and Settings\currentuser\.unison目录,默认的配置文件名是default.prf。  五、测试  首先分别在server1与server2的/home/unison/test目录下创建文件或目录,然后在server1上执行unison,接着如果在server1与server2上都能看到各自创建的文件,就说明同步成功。  分别在server1与server2上创建文件  [unison@server1 ~]$ cd test  [unison@server1 test]$ touch 1.txt touch 3.txt  [unison@server2 ~]$ cd test  [unison@server2 test]$ touch 2.txt touch 4.txt  在server1上执行unison  [unison@server1 ~]$ unison  在server1与server2上查看文件是否同步  [unison@server1 ~]$ cd test  [unison@server1 test]$ ls  1.txt 2.txt 3.txt 4.txt  [unison@server2 ~]$ cd test  [unison@server2 test]$ ls  1.txt 2.txt 3.txt 4.txt  均看到了“1.txt 2.txt 3.txt 4.txt”所有文件,说明文件同步已经成功!  注意:第一次SSH连接的时候可能需要输入一次密码,之后就不需要输入了。  六、定期或实时执行同步  如果想要定期执行,则通过crontab计划任务来实现,例如通过以下方式设置每5分钟执行一次  [root@server1 ~]# su - unison  [unison@server1 ~]$ crontab -e  1    */5 * * * * /usr/local/bin/unison  如果想要实时同步,则需要结合inotify-tools来实现,具体实现方式请参考我的这一篇文章:  通过rsync+inotify-tools+ssh实现触发式远程实时同步
声明:文章版权归原作者所有 部分文章转自互联网 如有侵权请联系 [邮箱地址] 删除

路过

雷人

握手

鲜花

鸡蛋

最新评论

返回顶部