`
Michaelmatrix
  • 浏览: 222362 次
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

在linux下使用rsync进行同步

 
阅读更多

rsyncLinux系统下一个用于同步的工具,即可以进行远程同步,也可以用于本地同步。服务器之间常常要保持些文件或目录的一致,比如一些大的软件下载网站,它们通常使用多台服务器来提供下载服务。当一台服务器上的文件更新后,其它的服务器也需要更新,而且 在更新的时候应该是只对新增或是修改过的文件进行更新,否则会造成网络带宽和时间的浪费。rsync就是能有效的保持文件及目录的一致的优秀软件。

rsyncremote synchronize 顾名思意就知道它是一款实现远程同步功能的软件,它在同步文件的同时,可以保持原来文件的权限、时间、软硬链接等附加信息,而且可以通过ssh方式来传输文件,这样其保密性也非常好,另外它还是免费的软件。rysnc的官方网站:::URL::http://rsync.samba.org/,可以从上面得到最新的版本。当然,因为rsync是一款如此有用的软件,所以很多Linux的发行版本都将它收录在内了。你的Linux 里并没有安装rsync,你可以按以下的安法自行安装:

安装过程

1.下载rsync

目前(20039)最新的rsync版本是2.5.6,从rysnc的官方网站上下载一个回来:

  # wget ::URL::http://ftp.samba.org/ftp/rsync/rsync-2.5.6.tar.gz

2.解压

  # tar -xzpvf rsync-2.5.6.tar.gz

3.编译安装

  # cd rsync-2.5.6/

  # ./configure --prefix=/usr/local/rsync

  # make

  # make install

以上过程没有出现的话就安装好了,现在就有rsync命令可以用了,rsync命令放在

/usr/local/rsync/bin。用rsync命令可以去运行有rsync服务的服务器上抓取资料。

  如果要把当前的机器变成一台rsync服务器的话,就需要继续进行一些配置了。

配置rsync服务

配置一个简单的rsync服务器并不复杂,你需要修改或建立一些配置文件。

rsyncd.conf

  # vi /etc/rsyncd.motd

rsyncd.confrsync服务的主要配置文件,它控制rsync服务的各种属性,下面给出一个

rsyncd.conf文件的例子:

  #先定义整体变量

  secrets file = /etc/rsyncd.secrets

  motd file = /etc/rsyncd.motd

  read only = yes

  list = yes

  uid = nobody

  gid = nobody

  hosts allow = 192.168.100.90 #哪些电脑可以访问rsync服务

  hosts deny = 192.168.100.0/24 #哪些电脑不可以访问rsync服务

  max connections = 2

  log file = /var/log/rsyncd.log

  pid file = /var/run/rsyncd.pid

  lock file = /var/run/rsync.lock

  #再定义要rsync目录

  [terry]

  comment = Terry 's directory from 192.168.100.21

  path = /home/terry

  auth users = terry,rsync

  [test]

  comment = test rsync

  path = /home/test

在上面的配置文件中,限定了192.168.100.0/24这个子网中,只有192.168.100.90的机器可以来访问这台rsync服务器的 rsync服务。配置文件的后面部分定义了两个rsync的目录,terry目录是只有知道terryrsync两个账号的人才能使用的,而text目录是无需账号就可以访问的。rsync在定义目录时还提供了一些其它选项,可以作更严格的控制。

rsyncd.secrets

  # vi /etc/rsyncd.secrets

rsyncd.secrets是存储rsync 服务的用户名和密码的,它是一个明文的文本文件,下面给出一个rsyncd.secrets文件的例子:

  terry:12345

  rsync:abcde

因为rsyncd.secrets存储了rsync服务的用户名和密码,所以非常重要,因此文件的属性必须 设为600,只有所有者可以读写:

  # chmod 600 /etc/rsyncd.secrets

rsyncd.motd

  # vi /etc/rsyncd.motd

rsyncd.motd记录了rsync服务的欢迎信息,你可以在其中输入任何文本信息,如:

  Welcome to use the rsync services!

services

  # vi /etc/services

services并不是rsync的配置文件,这一步也可以不做。而修改了services文件的好处就在于 系统知道873端口对就的服务名为rsync。修改services的方法就是确保services中有如下两行, 没有的话就自行加入:

  rsync  873/tcp  # rsync

  rsync  873/udp  # rsync

  5./etc/xinetd.d/rsync

  # vi /etc/xinetd.d/rsync

  建立一个名为/etc/xinetd.d/rsync文件,输入以下内容:

  service rsync

  {

    disable = no

    socket_type  = stream

    wait      = no

    user      = root

    server     = /usr/local/rsync/bin/rsync

    server_args  = --daemon

    log_on_failure += USERID

  }

保存后,就可以运行rsync服务了。输入以下命令:

  # /etc/rc.d/init.d/xinetd reload

这样rsync服务就在这台机器上(192.168.100.21)运行起来了,接下来就是如何来使用它了。

rsync命令的用法

在配置完rsync服务器后,就可以从客户端发出rsync命令来实现各种同步的操作。rsync有很 多功能选项,下面就对介绍一下常用的选项:

rsync的命令格式可以为:

  1. rsync [OPTION]... SRC [SRC]... [USER@]HOST : DEST]

  2. rsync [OPTION]... [USER@]HOST:SRC DEST]

  3. rsync [OPTION]... SRC [SRC]... DEST]

  4. rsync [OPTION]... [USER@]HOST::SRC [DEST]

  5. rsync [OPTION]... SRC [SRC]... [USER@]HOST :: DEST]

  6. rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

rsync有六种不同的工作模式:

1. 拷贝本地文件;当SRCDES路径信息都不包含有单个冒号":"分隔符时就启动这种工作模式。

2.使用一个远程shell程序(如rshssh)来实现将本地机器的内容拷贝到远程机器。当DST 路径地址包含单个冒号":"分隔符时启动该模式。

3.使用一个远程shell程序(如rshssh)来实现将远程机器的内容拷贝到本地机器。当SRC 地址路径包含单个冒号":"分隔符时启动该模式。

4. 从远程rsync服务器中拷贝文件到本地机。当SRC路径信息包含"::"分隔符时启动该模式。

5. 从本地机器拷贝文件到远程rsync服务器中。当DST路径信息包含"::"分隔符时启动该模式。

6. 列远程机的文件列表。这类似于rsync传输,不过只要在命令中省略掉本地机信息即可。   下面以实例来说明:

  # rsync -vazu -progress terry@192.168.100.21:/terry/ /home

  v详细提示

  aarchive模式操作,复制目录、符号连接

  z压缩

  u只进行更新,防止本地新文件被重写,注意两者机器的时钟的同时

  -progress指显示

以上命令是保持客户机192.168.100.90上的/home/terry目录和rsync服务器上的terry目录同 步。该命令执行同步之前会要求你输入terry账号的密码,这个账号是我们前面在rsyncd.secrets 文件中定义的。如果想将这条命令写到一个脚本中,然后定时执行它的话,可以使用--password-file 选项,具体命令如下:

  # rsync -vazu -progress –password-file=/etc/rsync.secret terry@192.168.100.21:/terry/ /home

  要使用--password-file选项,就得先建立一个存放密码的文件,这里指定为/etc/rsync.secret

其内容很简单,如下:

  terry:12345

同样要修改文件属性如下:

  # chmod 600 /etc/rsyncd.secrets

利用rsync保持Linux服务器间的文件同步实例

现在假设有两台Linux服务器A(192.168.100.21)B(192.168.100.90),服务器A中的

/home/terry和服务器B中的/home/terry这两个目录需要保持同步,也就是当服务器A中文件发生 改变后,服务器B中的文件也要对应去改变。

我们按上面的方法,在服务器A上安装rsync,并将其配置为一台rsync服务器,并将/home/terry 目录配置成rsync共享出的目录。然后在服务器B上安装rsync,因为B只做客户端,所以无需配置。 然后在服务器B,建立以下脚本:

  #!/bin/bash

  /usr/loca/rsync/bin/rsync -vazu -progress --delete

  --password-file=/etc/rsync.secret terry@192.168.100.21:/terry/ /home

将这个脚本保存为AtoB.sh,并加上可执行属性:

  # chmod 755 /root/AtoB.sh

然后,通过crontab设定,让这个脚本每30分钟运行一次。执行命令:

  # crontab -e

输入以下一行:

  0,30 * * * * /root/AtoB.sh

保存退出,这样服务器B每个小时的0分和30分时都会自动运行一次AtoB.shAtoB.sh是负责 保持服务器B和服务器A同步的。这样就保证了服务器A的所有更新在30钟后,服务器B也一样取 得了和服务器A一样的最新的资料。

客户端相关配置

a)安装rsync

b)创建密码文件

[root@localhost ~]#vi /etc/rsyncd.secrets

test#客户端只需密码无须用户

c)chmod 600 /etc/rsyncd.secrets

如果没有这步会报

password file must not be other-accessible

continuing without password file

Password:

d)rsync -vzrtopg --progress --delete --password-file=/etc/rsyncd.secrets test@192.168.128.130::test /root/test

测试连接

rsync 命令实例

显示目录内容

命令

a) rsync <dst-dir>

b) rsync -r <dst-dir>

c) rsync jack@192.168.0.1::<dst-dir>

d) rsync ssh_user@192.168.0.1:<dst-dir>

命令说明

a) 显示<dst-dir>目录内容(第一层)

b) 递归显示<dst-dir>目录内容

c).显示远程主机<dst-dir>目录内容

*1:端口模式, 基于rsync用户的身份验证

*2rsync server上的目录必须具有xx7的权限.

d) 查看远程主机<dst-dir>目录内容

*1remote shell模式, 通过ssh连接的基于系统本地用户的身份验证

*2:这里只使用了一个冒号(:),同时用户名是远程主机的ssh用户,密码也是ssh用户对应的密码。

*3:使用"<dst-dir>",则列出<dst-dir>文件夹本身的信息。若要列出<dst-dir>文件夹内容,应使用"<dst-dir>/"

参数说明

-r 对目录进行递归操作

本地目录之间同步

命令

a) rsync -av --progress <src-dir>/ <dst-dir> *** 注意(/) ***

b) rsync -av --progress <src-dir> <dst-dir>

c) rsync -avu --progress --delete <src-dir>/ <dst-dir>

d)rsync -av --progress --temp-dir=/tmp <src-dir>/ <dst-dir>

命令说明

a) 同步src-dir目录下所有文件到dst-dir目录下

b) 同步src-dir目录下所有文件到dst-dir/src-dir目录下

c).src-dir目录内容向dst-dir目录下进行差异更新,有增加/更新则添加替换,有减少则对其删减

d).a)多了—temp-dir=/tmp,即指定/tmp为临时交换区,这样可以避免因目标目录空间不够引起的无法同步文件的错误。

参数说明

-a 相当于 -rlptgoD 的集合

-u 等同于 –update,在目标文件比源文件新的情况下不更新

-v 显示同步的文件

--progress 显示文件同步时的百分比进度、传输速率

--delete 删除目标目录中多于源目录的文件

异地主机之间同步

命令

a) rsync -avz --progress <src-dir> jack@192.168.0.1::<dst-dir>/

b) rsync -avz --progress <src-dir> jack@192.168.0.1::<dst-dir>/ --password-file=/home/jack/rsync.jack

c) rsync -avuz --progress --delete <src-dir> jack@192.168.0.1::<dst-dir>/ --password-file=/home/jack/rsync.jack

d) rsync -avz --progress jack@192.168.0.1::<dst-dir>/<src-dir> <dst-dir>

命令说明

a) 同步本地<src-dir>目录的内容到远程主机192.168.0.1<dst-dir>目录下,jackrsync数据库用户(参见3. /etc/rsync.secrets)

b) 通过自动读取用户密码而实现非交互登录文件同步

c) b)多了-u和—delete

d) 同步远程主机内容到本地目录

参数说明

-z 等同于 –compress,对传输的文件压缩,这对节约网络带宽或在网络资源紧张的情况下非常有用

--password-file 引用192.168.0.1rsync用户jack口令的本地文件,创建方法如下

shell> echo "jackpwd" >> /home/jack/rsync.jack

shell> chown jack:wheel/home/jack/rsync.jack

shell> chmod 600/home/jack/rsync.jack

分享到:
评论

相关推荐

    linux 下rsync文件夹同步配置

    本文将详细介绍如何在Linux系统中配置rsync进行文件夹同步,包括准备工作、安装过程、服务端与客户端的配置步骤,以及如何通过脚本实现定时同步。 #### rsync简介 rsync是一种用于文件传输的开源软件,其核心功能...

    rsync 数据同步 实时同步 linux

    - 使用`netstat`或`ss`命令检查rsync服务是否监听在873端口上。 #### 三、rsync 基本用法 ##### 3.1 命令格式 ```bash rsync [参数] 源文件 目标文件 ``` - **参数**: - `-a`:归档模式,等同于`-rlptgoD`,递归...

    linux下Rsync+sersync实现文件数据实时同步

    例如,使用sersync进行实时监控和初步同步,然后利用Rsync的增量传输能力进行定期全量检查和修复。这种组合可以确保数据的完整性和一致性。 配置流程如下: 1. 首先,在所有需要同步的服务器上安装并配置sersync。...

    Linux下rsync文件同步详解

    Linux 下 rsync 文件同步详解 rsync 简介 RSYNC 是一个快速、可靠、功能强大且免費的 Unix 和 Linux 文件同步工具。它能够快速地同步文件和目录,从而实现文件的备份、镜像和同步。rsync 的主要功能包括文件同步...

    linux rsync及inotify实时同步

    在 Linux 系统中,进行数据备份和实时同步是非常重要的,rsync 及 inotify 是两种常用的技术,能够实现实时同步。本文将详细介绍如何使用 rsync 及 inotify 实现实时同步。 rsync 概述 rsync 是一种快速的本地和...

    cwRsync - 在Windows上使用rsync的同步工具

    **cwRsync——Windows平台上的rsync同步利器*...解压并安装后,将其添加到系统环境变量,即可在任何路径下使用`rsync`命令。同时,配合使用`cwRsync`提供的手册或在线文档,可以帮助你更好地理解和使用这个强大的工具。

    图解rsync数据同步部署文档.docx

    在 Linux 平台下,可以使用 rsync 命令来实现文件同步。安装 rsync 需要使用 yum 命令或 apt-get 命令来安装相应的软件包。服务端安装方法包括安装 rsync 服务和配置 OpenSSH 服务器。客户端安装方法包括安装 rsync ...

    linux-DuplexRsync使用rsync和fswatch进行DropBoxGoogleDrive风格的双向同步

    它可以实时检测文件或目录的创建、删除、修改等事件,并在发生变更时触发回调函数或执行命令,如在这里启动rsync同步。 3. **双向同步**: 双向同步意味着两个位置的更改都会被识别并应用到另一个位置。这需要解决...

    使用Linux的rsync命令实现多服务器镜像同步.doc

    使用 Linux 的 rsync 命令实现多服务器镜像同步 在 Linux 系统中,rsync 命令是实现文件同步和备份的强大工具。rsync 命令可以实现多服务器镜像同步,使得文件在不同服务器之间保持一致。本文将详细介绍使用 rsync ...

    linux系统下rsync文件同步配置工作笔记linux操作系统电脑资料.doc

    在Linux系统中,rsync是一个强大的文件同步工具,常用于数据备份和镜像服务。它支持本地或远程的文件同步,具有速度快、占用资源少的特点。以下是对rsync配置的详细说明: 首先,确保两台服务器都已安装了rsync。在...

    两台linux服务器目录实时同步(Rsync+Inotify)

    ### 实时同步技术详解:利用Rsync与Inotify在Linux环境下构建高效同步方案 #### 一、概述 在现代IT环境中,数据同步是一项至关重要的任务,尤其是在多服务器架构下,保持数据的一致性和实时性对于业务连续性至关...

    linux下使用rsync同步目录

    在 Linux 下使用 rsync 同步目录时,我们可以使用两种基本模式:从主机拉取数据到备机,或从备机推数据到主机。这两种模式的关键在于 rsync 命令的参数设置。 1. 从主机拉数据到备机: 使用 `-avzP --delete` 参数...

    linux系统下rsync配置

    此文档本人总结了linux下如何配置两台linux系统之间快速传递庞大数据的方法,总结其他很简单,一个看做服务端,一个看做客户端。通过配置rsync即可。前提是要安装rsync的rpm包,运维的小伙伴很实用!

    Linux下rsync安装配置使用教程.doc

    通过以上步骤,我们就可以在Linux环境中使用rsync进行高效的数据同步了。在实际应用中,可以根据需求调整配置文件中的各项参数,例如更改同步模式、添加认证、设置排除文件等,以满足不同场景的需求。同时,rsync...

    rsync只同步指定目录的方法(已测)

    rsync同步指定目录 rsync使用–include参数与–exclude参数来实现同步指定目录,并且–exclude目录放在后面。 例如: linux上文件目录 代码如下: ls /usr/local/apache/htdocs/site aa bb cc dd ee .. zz 只想同步...

    Rsync实现Linux系统间的远程同步和增量备份方案及搭建流程

    Rsync 实现 Linux 系统间的远程同步和增量备份方案及搭建流程 1. Rsync 简介 Rsync 是一个开源的文件同步工具,由 Andrew Tridgell 和 Paul Mackerras 开发。它可以实现跨系统的文件同步和备份,具有高效、可靠、...

    使用Linux的rsync命令实现多服务器镜像同步.docx

    使用 Linux 的 rsync 命令实现多服务器镜像同步 rsync 命令是一种高效的文件同步工具,经常应用于多服务器镜像同步中。通过 rsync 命令,可以实现对文件的实时同步、备份和恢复。以下是使用 rsync 命令实现多服务器...

    rsync rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步

    在提供的文件列表中,`cwRsync_4.0.5_Installer.exe`可能是Windows环境下安装rsync的程序,而`6082d061bcee43fc8d5138a3dad5c227.zip`可能包含有关rsync的配置文件或额外的脚本,用于自动化备份和同步任务。...

    linux_rsync同步的配置手册

    【Linux_rsync同步配置详解】 rsync是一款强大的文件同步工具,尤其在Linux环境中,它能够进行增量传输,大大提高了效率,降低了带宽消耗。通过rsync,我们可以实现在同一主机或者不同主机之间的文件备份和镜像。...

    Rsync实现文件备份同步

    它使用一种称为“滚动检查”的算法,可以在不完整传输文件的情况下发现并应用变化,这使得即使在网络带宽有限的情况下,Rsync也能高效地工作。 ### 3. 主要特点 - **增量同步**:Rsync能够识别并只传输源文件与...

Global site tag (gtag.js) - Google Analytics