如何將雲上的Linux文件自動備份到本地服務器

需求場景: 將雲上一臺Linux服務器文件備份到本地服務器,一週一備即可。

面對這樣一個需求,我們可能面臨下列幾個問題,

備份方式:是雲服務器推文件到本地服務器寫入,還是本地服務器從雲服務器拉文件?這個問題涉及就是誰作爲服務端,服務端需映射公網服務端口,客戶端則不需要。這裏我們將雲服務器作爲服務端,同時設置白名單隻允許本地服務器出口IP才允許訪問。

技術實現:如何從一臺服務器自動備份到另一臺服務器呢?哪一個技術方案相對更安全可靠?

這裏涉及的是文件備份,且實時性要求不高,最簡單的方式就是人工備份,由相關管理人員通過主動的方式手工備份文件到本地服務器。但這是懶人的時代,機器能做的,幹嘛用手來呢,我們來一起看看自動備份方案。

方案一:FTP

說起文件傳輸備份,首先想到就是FTP,FTP是用於網絡上進行文件傳輸的一套標準協議,但使它聲名狼藉的問題是它以明文方式傳輸密碼和文件內容,只要在網絡中對FTP連接進行監控就能被竊取。

FTP協議存在一些難以改善的缺點,它將走向終點。很顯然,這並不是一個好的技術方案。

方案二:SFTP

SFTP協議是在FTP的基礎上對數據進行加密,使得傳輸的數據相對來說更安全。但是這種安全是以犧牲效率爲代價的,也就是說SFTP的傳輸效率比FTP要低。不過現實使用中,文件量並沒有那麼大,這種差別並不明顯。

實施方案:

雲服務器作爲服務端開啓SFTP,提供連接地址、用戶名、密碼,白名單限制訪問來源IP。

客戶端可根據操作系統類型,採用不同的技術措施定期下載備份。

A、下載到Window服務器:

定時任務+WinSCP

winscp.exe /console /command "option batch continue" "option confirm off" "open sftp://username:[email protected]:22" "option transfer binary" "get /tmp D:\data\" "exit" /log=log_file.txt

B、下載到Linux服務器:

crontab+lftp

lftp -u username,password sftp://192.168.204.130 << EOF cd /tmp mget *.* bye EOF

方案三:rsync

rsync是linux系統下的數據鏡像備份工具,rsync的增量傳輸功能,十分強大。

假設待傳輸文件爲A,如果目標路徑下沒有文件A,則rsync會直接傳輸文件A,如果目標路徑下已存在文件A,則發送端視情況決定是否要傳輸文件A。rsync默認使用"quick check"算法,它會比較源文件和目標文件(如果存在)的文件大小和修改時間mtime,如果兩端文件的大小或mtime不同,則發送端會傳輸該文件,否則將忽略該文件。

實施方案:

1、雲服務器搭建rsync服務端,設置賬戶密碼,白名單限制訪問來源IP。

2、本地服務器安裝rsync客戶端,編寫shell腳本,結合crontab實現定時增量備份。

rsync -avz --password-file=/root/passwd [email protected]::common /tmp >/dev/null 2>&1

以上,藉助於一些常用的運維工具,來構建的解決方案,可以滿足這個需求場景下的文件自動備份需求。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章