Author: Luo

E-Mail: [email protected]

MSN: [email protected]

Date: 12 Sep, 2011

Keywords: Lustre，並行檔案系統， 叢集， 高效能， 線性增長

一 並行檔案系統

        檔案系統分為分散式和共享式，而在分散式檔案系統中，又細分有分散式並行檔案系統，這裡說的也是這個。NFS（網路檔案系統）是起源最早的為網路系統服務的檔案系統之一，使用者可以通過ＮＦＳ將自己的儲存才網路中共享給所有的客戶端。但是在系統增大，計算機節點增多的前提下，很容易出現訪問瓶頸，比如網路瓶頸（千兆網絡卡的最大資料能力就是100MB/s上下），儲存瓶頸（單硬碟的讀寫能力基本在100MB/s上下），伺服器記憶體等，都會成為儲存的瓶頸。基於此問題，誕生了更新一代的網路檔案系統，那就是分散式並行檔案系統。它通過在網路中集中的管理大於2臺儲存伺服器，使之能如訪問一臺儲存的使用方式一樣，保持系統前後使用的一致性基礎上， 通過儲存伺服器的疊加，來提高訪問的速度和儲存的大小。具體的做法如下：

 1. 一臺伺服器用來構建元資料伺服器，主要是檔案的索引資訊（檔案物理位置，檔案建立者，時間，日期，日誌等)；

 2.  多臺檔案儲存伺服器，用來儲存檔案的實際內容；

二 Lustre 概述

         Lustre檔案系統是當前應用最為廣泛的分散式並行檔案系統，在世界超級計算機500強中佔有大數（其他有ZFS, Panasas等），Lustre由SUN公司開發和維護，現在被Oracle收購，由Oracle提供開發和維護（從2.0開始，Oracle不提供純軟體的技術支援了，對免費使用的使用者來說，基本沒什麼影響），是免費的軟體，遵從GPL開源軟體協議。相容了POSIX標準（是一個UNIX系統的程式訪問作業系統介面，主要是方便應用程式在不同的Unix系統，包含了Linux系統之間方便的移植）的網路系統，能使用與類Unix，Linux，FreeBSD架構的系統。

三 系統安裝與部署

四 效能測試

五 除錯調優

六 編者按

七 備註

八 參考