以 Docker 為代表的容器技術在雲端計算領域正扮演著越來越重要的角色，甚至一度被認為是虛擬化技術的替代品。企業中對於有狀態的容器，往往需要將資料儲存在額外的儲存空間。Docker 引入了 Volume 機制，能夠將永久資料獨立於容器之外。正式的生產環境，Docker 通常是以叢集的方式使用的，因此容器會分散在不同的主機上，為了保證資料的一致性和可訪問性，共享儲存是不可避免的。相比於傳統共享檔案系統，分散式儲存系統擴充套件能力更強，由於資料都是分散在多個數據儲存伺服器上，因此資料更加可靠、安全，也更適用於容器的儲存。

Ceph 簡介

Ceph 概述

Ceph 是一個分散式儲存系統，獨一無二地用統一的系統—Ceph 儲存叢集，提供了物件儲存，塊儲存和檔案儲存三種功能。Ceph 的儲存叢集基於 RADOS，提供了極大伸縮性—供成千使用者訪問 PB 乃至 EB 級的資料。 

Ceph 有很多術語，瞭解這些術語，對理解 Ceph 的體系結構是非常重要的。表 1 給出了 Ceph 的常見術語。

表 1. Ceph 術語

對 Ceph 的術語有了瞭解後，我們來看下 Ceph 的體系結構。Ceph 的體系結構與組成部分如下圖 1 所示。Ceph 的體系結構由客戶端（Client），物件儲存閘道器（RADOSGW），塊儲存（RBD），檔案儲存（CEPHFS），和 RADOS 直接互動的庫 LIBRADOS，儲存叢集（RADOS）組成。

Ceph 儲存叢集從 Ceph 客戶端接收資料—不管是來自 Ceph 塊裝置、 Ceph 物件儲存、 Ceph 檔案系統、還是基於 librados 的自定義實現的—並存儲為物件。每個物件是檔案系統中的一個檔案，它們儲存在

圖 1. Ceph 體系結構

Ceph 儲存叢集是 Ceph 很重要的部分，Ceph 檔案系統、 Ceph 物件儲存、和 Ceph 塊裝置從 Ceph 儲存叢集統一讀出和寫入資料。Ceph 儲存叢集的元件如下圖 2 所示。Ceph 儲存叢集至少要有一個 Ceph Monitor 和兩個 OSD 組成，如果要使用檔案儲存功能，還至少要有一個 MDS。

圖 2. Ceph 儲存叢集

Ceph 常用命令

Ceph 客戶端提供了非常豐富的命令用來操作塊裝置。在與容器對接過程中，我們需要建立塊裝置，刪除塊裝置等功能，並且後續也需要針對這些功能提供相應的 REST API，方便通過 HTTP 請求的方式來操作塊裝置。所以這裡對一些常用的命令進行說明，如表 2 所示。

表 2. Ceph 常用命令

Ceph 分散式儲存叢集的安裝與配置

Ceph 叢集搭建

本文通過安裝 ceph-deploy 軟體的管理節點來安裝配置 ceph 叢集，以 6 個節點—3 個 monitor 節點，3 個 osd 節點，以 ceph kraken(1.11.1)版本為例，說明 Ceph 儲存叢集的安裝以及配置過程。叢集的配置資訊如表 3 所示。

表 3. Ceph 叢集配置資訊

Ceph 叢集的安裝配置過程如清單 1 所示。

清單 1. Ceph 叢集的安裝配置