FastDFS

最近學習FastDFS,在這裏記錄並複習下

什麼是FastDFS

• FastDFS 是用 c 語言編寫的一款開源的分佈式文件系統。FastDFS 爲互聯網量身定製， 充分考慮了冗餘備份、負載均衡、線性擴容等機制，並注重高可用、高性能等指標，使用 FastDFS 很容易搭建一套高性能的文件服務器集羣提供文件上傳、下載等服務。

• FastDFS 架構包括 Tracker server 和 Storage server。客戶端請求 Tracker server 進行文 件上傳、下載，通過 Tracker server 調度最終由 Storage server 完成文件上傳和下載。

• Tracker server 作用是負載均衡和調度，通過 Tracker server 在文件上傳時可以根據一些 策略找到 Storage server 提供文件上傳服務。可以將 tracker 稱爲追蹤服務器或調度服務 器。

• Storage server 作用是文件存儲，客戶端上傳的文件最終存儲在 Storage 服務器上， Storageserver 沒有實現自己的文件系統而是利用操作系統 的文件系統來管理文件。可以將 storage 稱爲存儲服務器。
  

• 服務端兩個角色:

  • Tracker:管理集羣，tracker 也可以實現集羣。每個 tracker 節點地位平等。收集 Storage 集羣的狀態。
  • Storage:實際保存文件 Storage 分爲多個組，每個組之間保存的文件是不同的。每 個組內部可以有多個成員，組成員內部保存的內容是一樣的，組成員的地位是一致的，沒有 主從的概念。

文件上傳流程

)

• 客戶端上傳文件後存儲服務器將文件 ID 返回給客戶端，此文件 ID 用於以後訪問該文 件的索引信息。文件索引信息包括:組名，虛擬磁盤路徑，數據兩級目錄，文件名。
  例如返回: group1/M00/00/00/wKgrBFzY6xiAEwvMAAAy1Tlm9So4838184

• 組名:文件上傳後所在的 storage 組名稱，在文件上傳成功後有 storage 服務器返回， 需要客戶端自行保存。

• 虛擬磁盤路徑:storage 配置的虛擬路徑，與磁盤選項 store_path*對應。如果配置了 - store_path0 則是 M00，如果配置了 store_path1 則是 M01，以此類推。

• 數據兩級目錄:storage 服務器在每個虛擬磁盤路徑下創建的兩級目錄，用於存儲數據 文件。

• 文件名:與文件上傳時不同。是由存儲服務器根據特定信息生成，文件名包含:源存儲 服務器 IP 地址、文件創建時間戳、文件大小、隨機數和文件拓展名等信息。

文件下載流程

簡易的FastDFS架構