CentOS6.5使用rsync遠程同步

需達成目標:在服務器(192.168.18.211)端搭建 rsync 服務,

     將 /root/rsync-server/ 目錄同步到客戶端 /root/rsync-local 目錄

Linux系統:CentOS 6.5

一、由於CentOS6.5已經默認已經安裝了 rsync,如若沒有安裝,可以參考如下方法:

1、檢查是否安裝了 rsync :

rpm -qa rsync
2、如果沒有安裝可以使用yum安裝

yum install -y rsync
3、啓動 rsync :

/etc/init.d/xinetd start
或 service xinetd start
二、服務端(192.168.18.211)[每個人的IP肯定都不一樣]

1、建立 rsync 賬號密碼文件:

vim /root/rsync_user , 添加一行 賬號 : 密碼

root:123456

2、修改權限

chmod 600 rsync_user
3、創建 rsync 全局配置文件

vim /etc/rsyncd.conf (默認沒有此配置文件,手動添加該文件),內容如下:
複製代碼
複製代碼
uid = nobody  // 傳輸文件時,執行的用戶
gid = nobody // 傳輸文件時,執行的用戶組
use chroot = yes  // 在傳輸文件之前,服務器守護程序在將chroot 到文件系統中的目錄中
pid file = /var/run/rsyncd.pid  // 告知進程寫到 /var/run/rsyncd.pid 文件中
log file = /var/log/rsyncd.log  // 日誌路徑

[tools]            // 模塊名,主要是定義服務器哪個目錄要被同步
path = /root/rsync-server    // 指定文件目錄所在位置,這是必須指定的
comment = Rsync share test // 註釋可以自己定義
auth users = root       // 認證用戶是 root,必須是服務器上真實存在的用戶
secrets file = /root/rsync_user  // 密碼存在哪個文件
read only = yes  // 是隻讀選擇,也就是說,不讓客戶端上傳文件到服務器
複製代碼
複製代碼
4、修改 /etc/xinetd.d/rsync

vim /etc/xinetd.d/rsync

關於super daemon 配置文件更詳細的內容請參考 《鳥哥的linux私房菜基礎篇 559頁》

三、客戶端(192.168.19.25)

1、設置密碼文件:

vim /root/rsync_pass // 只需寫登錄用戶密碼,要與服務器端設置密碼一致

123456

2、修改權限

chmod 600 rsync_pass
3、創建接收服務器文件的目錄

mkdir rsync-local
4、在同步服務文件之前,可以先瀏覽一下服務中帶共享的文件,此處可以先查看一下共享的文件

rsync [email protected]::tools
5、手動同步共享目錄

rsync -az --password-file=/root/rsync_pass [email protected]::tools /root/rsync-local
6、使用cron例行性任務定時從服務器同步文件

crontab -e
0 5 * /usr/bin/rsync -a --password-file=/root/rsync_pass [email protected]::tools /root/rsync-local

四、附rsyncd.conf服務器的配置詳解

1、全局定義

  uid = nobody
  gid = nobdoy

  注:服務器端傳輸文件時,要發哪個用戶和用戶組來執行,默認是nobody。 如果用nobody 用戶和用戶組,可能遇到權限問題,有些文件從服務器上拉不下來。所以我就偷懶,爲了方便,用了root 。不過您可以在定義要同步的目錄時定義的模塊中指定用戶來解決權限的問題。

  use chroot = yes

  注:用chroot,在傳輸文件之前,服務器守護程序在將chroot 到文件系統中的目錄中,這樣做的好處是可能保護系統被安裝漏洞侵襲的可能。缺點是需要超級用戶權限。另外對符號鏈接文件,將會排除在外。 也就是說,你在 rsync服務器上,如果有符號鏈接,你在備份服務器上運行客戶端的同步數據時,只會把符號鏈接名同步下來,並不會同步符號鏈接的內容;這個需要自己來嘗試

  read only = yes

  注:read only 是隻讀選擇,也就是說,不讓客戶端上傳文件到服務器上。還有一個 write only選項,自己嘗試是做什麼用的吧;

  hosts allow=192.168.1.0/255.255.255.0 10.0.1.0/255.255.255.0

  注:在您可以指定單個IP,也可以指定整個網段,能提高安全性。格式是ip 與ip 之間、ip和網段之間、網段和網段之間要用空格隔開;

  pid file = /var/run/rsyncd.pid 注:告訴進程寫到 /var/run/rsyncd.pid 文件中;
  port = 873 注:指定運行端口,默認是873,您可以自己指定;
  address = 192.168.18.211 注:指定服務器IP地址

  max connections = 5 注:客戶端最多連接數

  motd file = /etc/rsyncd/rsyncd.motd

  注:motd file 是定義服務器信息的,要自己寫 rsyncd.motd 文件內容。當用戶登錄時會看到這個信息。比如我寫的是:

  log file = /var/log/rsync.log 注:rsync 服務器的日誌;

2、模塊定義

  模塊定義什麼呢?主要是定義服務器哪個目錄要被同步。每個模塊都要以[name]形式。這個名字就是在rsync 客戶端看到的名字,其實有點象Samba服務器提供的共享名。而服務器真正同步的數據是通過path 指定的。我們可以根據自己的需要,來指定多個模塊。每個模塊要指定認證用戶,密碼文件、但排除並不是必須的

 下面是前面配置文件模塊的例子:
複製代碼
複製代碼
[rhel4home] #模塊它爲我們提供了一個鏈接的名字,在本模塊中鏈接到了/home目錄;要用[name] 形式
  path = /home #指定文件目錄所在位置,這是必須指定的
  auth users = root #認證用戶是root ,是必須在服務器上存在的用戶
  list=yes #list 意思是把rsync 服務器上提供同步數據的目錄在服務器上模塊是否顯示列出來。默認是yes 。如果你不想列出來,就no ;如果是no是比較安全的,至少別人不知道你的服務器上提供了哪些目錄。你自己知道就行了;
  ignore errors #忽略IO錯誤
  secrets file = /etc/rsyncd.secrets #密碼存在哪個文件
  comment = linuxsir home data #註釋可以自己定義
  exclude = beinan/ samba/ #exclude是排除的意思,也就是說,要把/home目錄下的easylife和samba排除在外; easylife/和samba/目錄之間有空格分開
複製代碼
複製代碼
五、防火牆的設置

  Linux 防火牆是用iptables,所以我們至少在服務器端要讓你所定義的rsync 服務器端口通過,客戶端上也應該讓通過。

iptables -A INPUT -p tcp -m state --state NEW -m tcp --dport 873 -j ACCEPT
iptables -L #查看一下防火牆是不是打開了 873端口
  如果你不太懂防火牆的配置,可以先service iptables stop 將防火牆關掉。當然在生產環境這是很危險的,做測試就無所謂啦!

六、rsync語法詳解

  在配置完rsync服務器後,就可以從客戶端發出rsync命令來實現各種同步的操作。rsync有很多功能選項,下面就對介紹一下常用的選項:

  rsync的命令格式可以爲:

  1. rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST

  2. rsync [OPTION]... [USER@]HOST:SRC DEST

  3. rsync [OPTION]... SRC [SRC]... DEST

  4. rsync [OPTION]... [USER@]HOST::SRC [DEST]

  5. rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST

  6. rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

  rsync有六種不同的工作模式:

  1. 拷貝本地文件;當SRC和DES路徑信息都不包含有單個冒號":"分隔符時就啓動這種工作模式。

  2.使用一個遠程shell程序(如rsh、ssh)來實現將本地機器的內容拷貝到遠程機器。當DST路徑地址包含單個冒號":"分隔符時啓動該模式。

  3.使用一個遠程shell程序(如rsh、ssh)來實現將遠程機器的內容拷貝到本地機器。當SRC地址路徑包含單個冒號":"分隔符時啓動該模式。

  4. 從遠程rsync服務器中拷貝文件到本地機。當SRC路徑信息包含"::"分隔符時啓動該模式。

  5. 從本地機器拷貝文件到遠程rsync服務器中。當DST路徑信息包含"::"分隔符時啓動該模式。

  6. 列遠程機的文件列表。這類似於rsync傳輸,不過只要在命令中省略掉本地機信息即可。
  

  rsync中的參數

  -a 以archive模式操作、複製目錄、符號連接 相當於-rlptgoD

  -r 是遞歸

  -l 是鏈接文件,意思是拷貝鏈接文件;-p 表示保持文件原有權限;-t 保持文件原有時間;-g 保持文件原有用戶組;-o 保持文件原有屬主;-D 相當於塊設備文件;

  -z 傳輸時壓縮;

  -P 傳輸進度;

  -v 傳輸時的進度等信息,和-P有點關係,自己試試。可以看文檔;

  -e ssh的參數建立起加密的連接。

  -u只進行更新,防止本地新文件被重寫,注意兩者機器的時鐘的同時

  --progress 是指顯示出詳細的進度情況

  --delete 是指如果服務器端刪除了這一文件,那麼客戶端也相應把文件刪除,保持真正的一致

  --password-file=/password/path/file來指定密碼文件,這樣就可以在腳本中使用而無需交互式地輸入驗證密碼了,這裏需要注意的是這份密碼文件權限屬性要設得只有屬主可讀。

七、rsync錯誤分析

我們都是通過錯誤日誌查看,在/etc/log/rsyncd.log裏面,大家可以用記事本打開查看。

注意windows下面我們需要給SvcwRsync用戶,管理同步目錄的所有權限,基本上這樣就可以了

問題一:
@ERROR: chroot failed
rsync error: error starting client-server protocol (code 5) at main.c(1522) [receiver=3.0.3]
原因:
服務器端的目錄不存在或無權限,創建目錄並修正權限可解決問題。

問題二:
@ERROR: auth failed on module tee
rsync error: error starting client-server protocol (code 5) at main.c(1522) [receiver=3.0.3]
原因:
服務器端該模塊(tee)需要驗證用戶名密碼,但客戶端沒有提供正確的用戶名密碼,認證失敗。
提供正確的用戶名密碼解決此問題。

問題三:
@ERROR: Unknown module ‘tee_nonexists'
rsync error: error starting client-server protocol (code 5) at main.c(1522) [receiver=3.0.3]
原因:
服務器不存在指定模塊。提供正確的模塊名或在服務器端修改成你要的模塊以解決問題。

問題1:
在client上遇到問題:
rsync -auzv --progress --password-file=/etc/rsync.pas [email protected]::backup /home/
rsync: could not open password file "/etc/rsync.pas": No such file or directory (2)
Password:
@ERROR: auth failed on module backup
rsync error: error starting client-server protocol (code 5) at main.c(1506) [Receiver=3.0.7]
遇到這個問題:client端沒有設置/etc/rsync.pas這個文件,而在使用rsync命令的時候,加了這個參數--
password-file=/etc/rsync.pas

問題2:
rsync -auzv --progress --password-file=/etc/rsync.pas [email protected]::backup /home/
@ERROR: auth failed on module backup
rsync error: error starting client-server protocol (code 5) at main.c(1506) [Receiver=3.0.7]
遇到這個問題:client端已經設置/etc/rsync.pas這個文件,裏面也設置了密碼111111,和服務器一致,但是
服務器段設置有錯誤,服務器端應該設置/etc/rsync.pas ,裏面內容root:111111 ,這裏登陸名不可缺少

問題3:
rsync -auzv --progress --password-file=/etc/rsync.pas [email protected]::backup /home/
@ERROR: chdir failed
rsync error: error starting client-server protocol (code 5) at main.c(1506) [Receiver=3.0.7]
遇到這個問題,是因爲服務器端的/home/backup 其中backup這個目錄並沒有設置,所以提示:chdir failed

問題4:
rsync: write failed on "/home/backup2010/wensong": No space left on device (28)
rsync error: error in file IO (code 11) at receiver.c(302) [receiver=3.0.7]
rsync: connection unexpectedly closed (2721 bytes received so far) [generator]
rsync error: error in rsync protocol data stream (code 12) at io.c(601) [generator=3.0.7]
磁盤空間不夠,所以無法操作。
可以通過df /home/backup2010 來查看可用空間和已用空間

問題5:網絡收集問題
1、權限問題
類似如下的提示:rsync: opendir "/kexue" (in dtsChannel) failed: Permission denied (13)注意查看同步的目錄權限是否爲755

2、time out
rsync: failed to connect to 203.100.192.66: Connection timed out (110)
rsync error: error in socket IO (code 10) at clientserver.c(124) [receiver=3.0.5]
檢查服務器的端口netstat –tunlp,遠程telnet測試。
可能因爲客戶端或者服務端的防火牆開啓 導致無法通信,可以設置規則放行 rsync(873端口) 或者直接關閉防火牆。

還有一種在同步過程中可能會提示沒有權限 (將同步目錄加上SvcwRsync全部權限即可,更簡單的方法就是將SvcwRsync設爲管理員即可)

3、服務未啓動
rsync: failed to connect to 10.10.10.170: Connection refused (111)
rsync error: error in socket IO (code 10) at clientserver.c(124) [receiver=3.0.5]
啓動服務:rsync --daemon --config=/etc/rsyncd.conf

4、磁盤空間滿
rsync: recv_generator: mkdir "/teacherclubBackup/rsync……" failed: No space left on device (28)
Skipping any contents from this failed directory

5、Ctrl+C或者大量文件
rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(544) [receiver=3.0.5]
rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(544) [generator=3.0.5]
說明:導致此問題多半是服務端服務沒有被正常啓動,到服務器上去查查服務是否有啓動,然後查看下 /var/run/rsync.pid 文件是否存在,最乾脆的方法是殺死已經啓動了服務,然後再次啓動服務或者讓腳本加入系統啓動服務級別然後shutdown -r now服務器

6、xnetid啓動
rsync: read error: Connection reset by peer (104)
rsync error: error in rsync protocol data stream (code 12) at io.c(759) [receiver=3.0.5]
查看rsync日誌
rsync: unable to open configuration file "/etc/rsyncd.conf": No such file or directory
xnetid查找的配置文件位置默認是/etc下,根據具體情況創建軟鏈接。例如:
ln -s /etc/rsyncd/rsyncd.conf /etc/rsyncd.conf
或者更改指定默認的配置文件路徑,在/etc/xinetd.d/rsync配置文件中。

我自己的解決方案是:查看 /etc/xinetd.d/rsync 中 server_args 的配置 ,應該是 --config=/etc/rsyncd.conf 這個路徑寫錯了

Rsync configure:
配置一:
ignore errors
說明:這個選項最好加上,否則再很多crontab的時候往往發生錯誤你也未可知,因爲你不可能天天去看每時每刻去看log,不加上這個出現錯誤的機率相對會很高,因爲任何大點的項目和系統,磁盤IO都是一個瓶頸

Rsync error:
錯誤一:
@ERROR: auth failed on module xxxxx
rsync: connection unexpectedly closed (90 bytes read so far)
rsync error: error in rsync protocol data stream (code 12) at io.c(150)
說明:這是因爲密碼設置錯了,無法登入成功,檢查一下rsync.pwd,看客服是否匹配。還有服務器端沒啓動rsync 服務也會出現這種情況。

錯誤二:
password file must not be other-accessible
continuing without password file
Password:
說明:這是因爲rsyncd.pwd rsyncd.sec的權限不對,應該設置爲600。如:chmod 600 rsyncd.pwd

錯誤三:
@ERROR: chroot failed
rsync: connection unexpectedly closed (75 bytes read so far)
rsync error: error in rsync protocol data stream (code 12) at io.c(150)
說明:這是因爲你在 rsync.conf 中設置的 path 路徑不存在,要新建目錄才能開啓同步

錯誤四:
rsync: failed to connect to 218.107.243.2: No route to host (113)
rsync error: error in socket IO (code 10) at clientserver.c(104) [receiver=2.6.9]
說明:防火牆問題導致,這個最好先徹底關閉防火牆,排錯的基本法就是這樣,無論是S還是C,還有ignore errors選項問題也會導致

錯誤五:
@ERROR: access denied to www from unknown (192.168.1.123)
rsync: connection unexpectedly closed (0 bytes received so far) [receiver]
rsync error: error in rsync protocol data stream (code 12) at io.c(359)
說明:此問題很明顯,是配置選項host allow的問題,初學者喜歡一個允許段做成一個配置,然後模塊又是同一個,致使導致

錯誤六:
rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(244) [generator=2.6.9]
rsync error: received SIGUSR1 (code 19) at main.c(1182) [receiver=2.6.9]
說明:導致此問題多半是服務端服務沒有被正常啓動,到服務器上去查查服務是否有啓動,然後查看下 /var/run/rsync.pid 文件是否存在,最乾脆的方法是殺死已經啓動了服務,然後再次啓動服務或者讓腳本加入系統啓動服務級別然後shutdown -r now服務器

錯誤七:
rsync: read error: Connection reset by peer (104)
rsync error: error in rsync protocol data stream (code 12) at io.c(604) [sender=2.6.9]
說明:原數據目錄裏沒有數據存在

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章