rsync: 牛比的備份系統

學習任何新的知識,總結是必需的。現在我把我從網上看到關於rsync總結一下:
在官方站點 [url]http://rsync.samba.org/[/url] 對rsync的描述是
rsync is an open source utility that provides fast incremental file transfer.

現在最新版本是2005年3月30日發佈的Rsync 2.6.4 released。

第一步:編譯安裝,注意在server(以服務器模式運行rsync守護進程)和client都要安裝
$ tar xvf rsync-2.6.4.tar.gz
$ cd rsync-2.6.4
$./configure --prefix=/usr/local/rsync
$ make
$ make install

第二步:配置server端(這不我還不明白,請參考
[url]http://rsync.samba.org/ftp/rsync/rsyncd.conf.html[/url]
[url]http://www.linuxaid.com.cn/engineer/ideal/article/rsync.htm[/url])

第三步:啓動rsyncd服務器
# rsync -daemon

第四步:在client執行命令就開始備份了
(這裏的好多命令我也不懂)

後記:我還沒實踐過,等以後有機會用rsync,在查命令就行了,現在對它瞭解就行了。

簡介:rsync是個真正的鏡像工具,它能相應地刪除本地文件萬一服務器上的文件被刪除,
這一點比wget好,在鏡像目錄的同時也能排除某些目錄及文件。速度非常快.

主頁:rsync.samba.org
環境: Redhat Linux 6.2 , rsync 2.4.3(下載源碼編譯最好),
   兩臺linux服務器192.168.11.7(test)(rsync server) ,
 192.168.11.2(proxy)(rsync client)

步驟:

1. 下載最新的rsync 2.4.3源文件編譯,看rsync.samba.org ,據我所知, 只有2.4.3才支持鏡像時的排除選項 --include and --exclude, 編譯後得到一個執行文件rsync,僅需這個執行文件即可.

2. 編輯配置文件/etc/rsyncd.conf 如下:
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock

[test]
    path = /test
    comment = test folder
    uid = root
    ignore errors
    read only = yes
    list = no
    auth users = sun
    secrets file = /etc/test.scrt

註釋: 定義了需要被鏡像的目錄爲/test,需要密碼連接,文件在/etc/test.scrt,
注意該文件的屬性和權限  -rw-------   1 root     root       test.scrt

[root@test /etc]# more /etc/test.scrt
test:tset


3.啓動服務器後臺 rsync
# rsync --daemon
且加這一行到/etc/rc.d/rc.local
# echo "rsync --daemon" >> /etc/rc.d/rc.local

4. 在服務器192.168.11.2上設定客戶端cron job. 每晚自動作備份或者鏡像
0 21 * * 1-5 /root/.test.sh
note:每晚九點週一至週五自動運行/root/.test.sh作備份
#more /root/.test.sh
#!/bin/sh
DATE=`date +%w`

rsync -tvzrp -e ssh --progress --delete [email protected]::test /shopu/test/$DATE --password
-file=/etc/test > /var/log/test/test.$DATE
mail -s "test Backup is done"  myemailaddress < /var/log/test/test.$DATE

[root@proxy /root]# more /etc/test
tset
[root@proxy /root]# ls /etc/test -l
-rw-------   1 root     root            4 May 16 21:40 /etc/test


注意: -e ssh表示用SSH加密連接,需要服務器test支持SSH

5.可用於下列用途:
a. 從另一臺服務器備份主服務器上的某個整個目錄,且可排除某個子目錄及文件
b. 鏡像主WEB服務器的主頁目錄,適合於像像網站,用--delete可刪除服務器上沒有的本地文件
  是真正的像像,不同於wget,wget僅根據網站的URL鏈接下載鏈接指向的每個文件,本地文件並不刪除


詳細介紹rsync服務的安裝配置以及如何利用rsync保持Linux服務器間的文件同步。
  服務器之間常常要保持些文件或目錄的一致,比如一些大的軟件下載網站,它們通常使用多臺服務器來提供下載服務。當一臺服務器上的文件更新後,其它的服務器也需要更新,而且 在更新的時候應該是隻對新增或是修改過的文件進行更新,否則會造成網絡帶寬和時間的浪費。rsync就是能有效的保持文件及目錄的一致的優秀軟件。
  rsync,remote synchronize
  顧名思意就知道它是一款實現遠程同步功能的軟件,它在同步文件的同時,可以保持原來文件的權限、時間、軟硬鏈接等附加信息,而且可以通過ssh方式來傳輸文件,這樣其保密性也非常好,另外它還是免費的軟件。rysnc的官方網站:[url]http://rsync.samba.org/[/url],可以從上面得到最新的版本。當然,因爲rsync是一款如此有用的軟件,所以很多Linux的發行版本都將它收錄在內了。你的Linux裏並沒有安裝rsync,你可以按以下的安法自行安裝:
  一、安裝過程
  1.下載rsync
  目前(2003年9月)最新的rsync版本是2.5.6,從rysnc的官方網站上下載一個回來:
  # wget [url]http://ftp.samba.org/ftp/rsync/rsync-2.5.6.tar.gz[/url]

  2.解壓
  # tar -xzpvf rsync-2.5.6.tar.gz

  3.編譯安裝
  # cd rsync-2.5.6/
  # ./configure --prefix=/usr/local/rsync
  # make
  # make install
  以上過程沒有出現的話就安裝好了,現在就有rsync命令可以用了,rsync命令放在
/usr/local/rsync/bin。用rsync命令可以去運行有rsync服務的服務器上抓取資料。
  如果要把當前的機器變成一臺rsync服務器的話,就需要繼續進行一些配置了。

  二、配置rsync服務
  配置一個簡單的rsync服務並不複雜,你需要修改或建立一些配置文件。
  1.rsyncd.conf
  # vi /etc/rsyncd.motd
  rsyncd.con是rsync服務的主要配置文件,它控制rsync服務的各種屬性,下面給出一個
rsyncd.conf文件的例子:
  #先定義整體變量
  secrets file = /etc/rsyncd.secrets
  motd file = /etc/rsyncd.motd
  read only = yes
  list = yes
  uid = nobody
  gid = nobody
  hosts allow = 192.168.100.90 #哪些電腦可以訪問rsync服務
  hosts deny = 192.168.100.0/24 #哪些電腦不可以訪問rsync服務
  max connections = 2
  log file = /var/log/rsyncd.log
  pid file = /var/run/rsyncd.pid
  lock file = /var/run/rsync.lock
  #再定義要rsync目錄
  [terry]
  comment = Terry 's directory from 192.168.100.21
  path = /home/terry
  auth users = terry,rsync
  [test]
  comment = test rsync
  path = /home/test
  在上面的配置文件中,限定了192.168.100.0/24這個子網中,只有192.168.100.90的機器可以來訪問這臺rsync服務器的rsync服務。配置文件的後面部分定義了兩個rsync的目錄,terry目錄是隻有知道terry、rsync兩個賬號的人才能使用的,而text目錄是無需賬號就可以訪問的。rsync在定義目錄時還提供了一些其它選項,可以作更嚴格的控制。

  2.rsyncd.secrets
  # vi /etc/rsyncd.secrets
  rsyncd.secrets是存儲rsync服務的用戶名和密碼的,它是一個明文的文本文件,下面給出一個rsyncd.secrets文件的例子:
  terry:12345
  rsync:abcde
  因爲rsyncd.secrets存儲了rsync服務的用戶名和密碼,所以非常重要,因此文件的屬性必須
設爲600,只有所有者可以讀寫:
  # chmod 600 /etc/rsyncd.secrets

  3.rsyncd.motd
  # vi /etc/rsyncd.motd
  rsyncd.motd記錄了rsync服務的歡迎信息,你可以在其中輸入任何文本信息,如:
  Welcome to use the rsync services!

  4.services
  # vi /etc/services
  services並不是rsync的配置文件,這一步也可以不做。而修改了services文件的好處就在於
系統知道873端口對就的服務名爲rsync。修改services的方法就是確保services中有如下兩行,
沒有的話就自行加入:
  rsync  873/tcp  # rsync
  rsync  873/udp  # rsync
  5./etc/xinetd.d/rsync
  # vi /etc/xinetd.d/rsync
  建立一個名爲/etc/xinetd.d/rsync文件,輸入以下內容:
  service rsync
  {
    disable = no
    socket_type  = stream
    wait      = no
    user      = root
    server     = /usr/local/rsync/bin/rsync
    server_args  = --daemon
    log_on_failure += USERID
  }
  保存後,就可以運行rsync服務了。輸入以下命令:
  # /etc/rc.d/init.d/xinetd reload
  這樣rsync服務就在這臺機器上(192.168.100.21)運行起來了,接下來就是如何來使用它了。

  三、rsync命令的用法
  在配置完rsync服務器後,就可以從客戶端發出rsync命令來實現各種同步的操作。rsync有很
多功能選項,下面就對介紹一下常用的選項:
  rsync的命令格式可以爲:
  1. rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST
  2. rsync [OPTION]... [USER@]HOST:SRC DEST
  3. rsync [OPTION]... SRC [SRC]... DEST
  4. rsync [OPTION]... [USER@]HOST::SRC [DEST]
  5. rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST
  6. rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

  rsync有六種不同的工作模式:
  1. 拷貝本地文件;當SRC和DES路徑信息都不包含有單個冒號":"分隔符時就啓動這種工作模式。
  2.使用一個遠程shell程序(如rsh、ssh)來實現將本地機器的內容拷貝到遠程機器。當DST
路徑地址包含單個冒號":"分隔符時啓動該模式。
  3.使用一個遠程shell程序(如rsh、ssh)來實現將遠程機器的內容拷貝到本地機器。當SRC
地址路徑包含單個冒號":"分隔符時啓動該模式。
  4. 從遠程rsync服務器中拷貝文件到本地機。當SRC路徑信息包含"::"分隔符時啓動該模式。
  5. 從本地機器拷貝文件到遠程rsync服務器中。當DST路徑信息包含"::"分隔符時啓動該模式。
  6. 列遠程機的文件列表。這類似於rsync傳輸,不過只要在命令中省略掉本地機信息即可。
  下面以實例來說明:
  # rsync -vazu -progress [email protected]:/terry/ /home
  v詳細提示
  a以archive模式操作,複製目錄、符號連接
  z壓縮
  u只進行更新,防止本地新文件被重寫,注意兩者機器的時鐘的同時
  -progress指顯示
  以上命令是保持客戶機192.168.100.90上的/home/terry目錄和rsync服務器上的terry目錄同
步。該命令執行同步之前會要求你輸入terry賬號的密碼,這個賬號是我們前面在rsyncd.secrets
文件中定義的。如果想將這條命令寫到一個腳本中,然後定時執行它的話,可以使用--password-file
選項,具體命令如下:
  # rsync -vazu -progress --password-file=/etc/rsync.secret
  [email protected]:/terry/ /home
  要使用--password-file選項,就得先建立一個存放密碼的文件,這裏指定爲/etc/rsync.secret。
其內容很簡單,如下:
  terry:12345
  同樣要修改文件屬性如下:
  # chmod 600 /etc/rsyncd.secrets

  四、利用rsync保持Linux服務器間的文件同步實例
  現在假設有兩臺Linux服務器A(192.168.100.21)和B(192.168.100.90),服務器A中的
/home/terry和服務器B中的/home/terry這兩個目錄需要保持同步,也就是當服務器A中文件發生
改變後,服務器B中的文件也要對應去改變。
  我們按上面的方法,在服務器A上安裝rsync,並將其配置爲一臺rsync服務器,並將/home/terry
目錄配置成rsync共享出的目錄。然後在服務器B上安裝rsync,因爲B只做客戶端,所以無需配置。
然後在服務器B,建立以下腳本:
  #!/bin/bash
  /usr/loca/rsync/bin/rsync -vazu -progress --delete
  --password-file=/etc/rsync.secret [email protected]:/terry/ /home
  將這個腳本保存爲AtoB.sh,並加上可執行屬性:
  # chmod 755 /root/AtoB.sh
  然後,通過crontab設定,讓這個腳本每30分鐘運行一次。執行命令:
  # crontab -e
  輸入以下一行:
  0,30 * * * * /root/AtoB.sh
  保存退出,這樣服務器B每個小時的0分和30分時都會自動運行一次AtoB.sh,AtoB.sh是負責
保持服務器B和服務器A同步的。這樣就保證了服務器A的所有更新在30鍾後,服務器B也一樣取
得了和服務器A一樣的最新的資料。

  五、其它應用
  rsync除了同步文件及目錄之外,還可以利用它來實現對遠程網站的遠程備份。如果再結合腳本和Crontab就能實現定時自動遠程備份。其可以實現與商業化的備份和鏡象產品的類似效果,但完全免費。
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章