FastDFS

FastDFS是用c語言編寫的一款開源的分佈式文件系統。FastDFS爲互聯網量身定製,充分考慮了冗餘備份、負載均衡、線性擴容等機制,並注重高可用、高性能等指標,使用FastDFS很容易搭建一套高性能的文件服務器集羣提供文件上傳、下載等服務。

FastDFS架構:

FastDFS架構包括 Tracker serverStorage server。客戶端請求Tracker server進行文件上傳、下載,通過Tracker server調度最終由Storage server完成文件上傳和下載。

Tracker server作用是負載均衡和調度,通過Tracker server在文件上傳時可以根據一些策略找到Storage server提供文件上傳服務。可以將tracker稱爲追蹤服務器或調度服務器。

Storage server作用是文件存儲,客戶端上傳的文件最終存儲在Storage服務器上,Storage server沒有實現自己的文件系統而是利用操作系統 的文件系統來管理文件。可以將storage稱爲存儲服務器。


服務端兩個角色:

Tracker:管理集羣,tracker也可以實現集羣。每個tracker節點地位平等。

收集Storage集羣的狀態。

Storage:實際保存文件

Storage分爲多個組,每個組之間保存的文件是不同的。每個組內部可以有多個成員,組成員內部保存的內容是一樣的,組成員的地位是一致的,沒有主從的概念。

 文件上傳的流程

客戶端上傳文件後存儲服務器文件ID返回給客戶端,此文件ID用於以後訪問該文件的索引信息。

文件索引信息包括:組名,虛擬磁盤路徑,數據兩級目錄,文件名。


 組名:文件上傳後所在的storage組名稱,在文件上傳成功後有storage服務器返回,需要客戶端自行保存。

虛擬磁盤路徑:storage配置的虛擬路徑,與磁盤選項store_path*對應。如果配置了store_path0則是M00,如果配置了store_path1則是M01,以此類推。

數據兩級目錄:storage服務器在每個虛擬磁盤路徑下創建的兩級目錄,用於存儲數據文件。

 文件名:與文件上傳時不同。是由存儲服務器根據特定信息生成,文件名包含:源存儲服務器IP地址、文件創建時間戳、文件大小、隨機數和文件拓展名等信息。

文件下載

好了,詳細的安裝等方法這裏就不說了。可以參考一下大牛們的文章:

比如:https://www.cnblogs.com/chiangchou/p/fastdfs.html#_label0

或者:https://blog.csdn.net/chen3888015/article/details/70172505


這裏主要說,我們的java這塊的使用:

引入FastDFS的工具 jar包,用maven引入,手動也行。

使用例子:

創建配置文件

配置文件內容:tracker_server=192.168.25.133:22122

@Test
	public void testFileUpload() throws Exception {
		// 1、加載配置文件,配置文件中的內容就是tracker服務的地址。
		ClientGlobal.init("D:/workspaces-itcast/e3-manager-web/src/main/resources/resource/client.conf");
		// 2、創建一個TrackerClient對象。直接new一個。
		TrackerClient trackerClient = new TrackerClient();
		// 3、使用TrackerClient對象創建連接,獲得一個TrackerServer對象。
		TrackerServer trackerServer = trackerClient.getConnection();
		// 4、創建一個StorageServer的引用,值爲null
		StorageServer storageServer = null;
		// 5、創建一個StorageClient對象,需要兩個參數TrackerServer對象、StorageServer的引用
		StorageClient storageClient = new StorageClient(trackerServer, storageServer);
		// 6、使用StorageClient對象上傳圖片。
		//擴展名不帶“.”
		String[] strings = storageClient.upload_file("D:/Documents/Pictures/images/200811281555127886.jpg", "jpg", null);
		// 7、返回數組。包含組名和圖片的路徑。
		for (String string : strings) {
			System.out.println(string);
		}
	}

這些繁瑣的步驟,我們可以把它做成一個工具類,來使用就方便多了。

工具類按照自己的思路去寫,寫的類有點多這裏就不展示了。

@Test
	public void testFastDfsClient() throws Exception {
		FastDFSClient fastDFSClient = new FastDFSClient("D:/workspaces-itcast/e3-manager-web/src/main/resources/resource/client.conf");
		String file = fastDFSClient.uploadFile("D:/Documents/Pictures/images/2f2eb938943d.jpg");
		System.out.println(file);
	}
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章