實驗室要求開始學習Ceph，我也開始學著自己搭建Ceph，中間走了很多冤枉路，在此我也和大家分享一下！

（之前在網上找的搭建教程ceph版本都是ceph 0.82之前的，ceph 0.82後 不支援mkcephfs 命令初始化ceph環境（如果搭建0.82版本之前的ceph，就得自己編譯ceph原始碼，很麻煩，中途會出現各種錯誤，安裝各種依賴包，使用者體驗極差！故建議直接ceph-deploy搭建）

搭建時間：2015.08.22    實驗步驟：

第一步~~~.準備  4個Ubuntu 14.04 Server 虛擬機器（可以使用VMware或者VirtualBox）

 配置好每個虛擬機器的IP 以及hostname （很重要！）

 我的四臺虛擬機器配置如下：（ip根據個人的網路環境配置，記得虛擬機器網路選擇橋接模式）

①虛擬機器1 ： hostname：ceph  ；IP ：10.10.211.155；這臺虛擬機器對應下圖admin-node節點 用來安裝ceph-deploy 進行ceph部署使用，基本上大部分操作都在這臺機器上

②虛擬機器2： hostname：ceph1 ；IP ：10.10.211.151；這臺虛擬機器對應下圖node1節點，用來安裝monitor節點

③虛擬機器3： hostname：ceph2 ；IP ：10.10.211.152；這臺虛擬機器對應下圖node2節點，用來安裝osd節點

④虛擬機器4： hostname：ceph3 ；IP ：10.10.211.153；這臺虛擬機器對應下圖node3節點，用來安裝osd節點  

配置好後ping www.baidu.com 看是否可以上網。

第二步~~~.在虛擬機器1上也就是ceph（hostname是ceph）上執行以下三個命令安裝cephdeploy：

wget -q -O- 'https://ceph.com/git/?p=ceph.git;a=blob_plain;f=keys/release.asc' | sudo apt-key add -
echo deb http://ceph.com/debian-hammer/ $(lsb_release -sc) main | sudo tee /etc/apt/sources.list.d/ceph.list
sudo apt-get update && sudo apt-get install ceph-deploy
 

第三步~~~.在四臺虛擬機器上都安裝ntp與openssh-server ，實現時間同步以及ceph 節點ssh訪問ceph1 ceph2 ceph3節點

四臺虛擬機器上都執行以下2個命令：

sudo apt-get install ntp
sudo apt-get install openssh-server

第四步~~~.在ceph1 ceph2 ceph3 虛擬機器上新建一個使用者 （我在三臺虛擬機器上全是新建的cephuser使用者）具有sudo許可權

在虛擬機器ceph上使用ssh連結ceph1 ceph2 ceph3虛擬機器

（注意：先在虛擬機器ceph裡面配置好hosts）

在虛擬機器ceph上執行：

sudo vim /etc/hosts

在後面新增：

10.10.211.151   ceph1
10.10.211.152   ceph2
10.10.211.153   ceph3

如下圖：

使用虛擬機器ceph ssh連結ceph1 (usercz是我建虛擬機器的時候建立的預設使用者，cephuser是我新建的使用者)

ssh [email protected]

sudo useradd -d /home/cephuser -m cephuser
sudo passwd cephuser
echo "cephuser ALL = (root) NOPASSWD:ALL" | sudo tee /etc/sudoers.d/cephuser
sudo chmod 0440 /etc/sudoers.d/cephuser

連結ceph2 ceph3 執行類似操作！

第五步~~~.ceph虛擬機器生成ssh-keygen 並複製到ceph1 ceph2 ceph3 節點上

在ceph上執行：（執行ssh-keygen後全部按回車鍵）

ssh-keyge
（全按回車鍵，預設）
Generating public/private key pair.
Enter file in which to save the key (/ceph-admin/.ssh/id_rsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:
Your identification has been saved in /ceph-admin/.ssh/id_rsa.
Your public key has been saved in /ceph-admin/.ssh/id_rsa.pub.

接著繼續執行：

ssh-copy-id [email protected]
ssh-copy-id [email protected]
ssh-copy-id [email protected]

修改 ~/.ssh/config

vim  ~/.ssh/config

在config裡面加上：

第六步~~~. 在ceph（admin節點） 建立my-cluster 目錄並進入

mkdir my-cluster
cd my-cluster

（注意下面的操作都在此目錄下執行，有些配置檔案會生成在裡面）

執行：

ceph-deploy new ceph1

會在my-cluster下生成三個檔案Ceph configuration file, a monitor secret keyring, and a log file

修改Ceph configuration file檔案 

vim ceph.conf 

並在後面加上 第一個引數2是副本數量，第二個2000是 日誌大小約為2G

osd pool default size = 2
osd journal size = 2000

第七步~~~.在ceph1 ，ceph2 ，ceph3 三個節點上安裝ceph

在ceph節點上執行：

ceph-deploy install ceph1 ceph2 ceph3

        （可能會報錯，大部分是網路問題，繼續重複執行就是！直到成功為止！可以選擇一個節點一個節點的安裝）

第八步~~~.在ceph上執行：

ceph-deploy mon create-initial

會在my-cluster目錄下生成四個檔案

第九步~~~.在ceph2 ceph3節點上建立osd 每個節點建立一個osd檔案目錄

ssh ceph2
sudo mkdir /var/local/osd0
exit
ssh ceph3
sudo mkdir /var/local/osd1
exit

第十步~~~. 繼續在ceph上執行：

準備osd 命令：

ceph-deploy osd prepare ceph2:/var/local/osd0 ceph3:/var/local/osd1

ceph-deploy osd activate ceph2:/var/local/osd0 ceph3:/var/local/osd1

執行以下兩條：

ceph-deploy admin ceph ceph1 ceph2 ceph3
sudo chmod +r /etc/ceph/ceph.client.admin.keyring

最後一步~~~.最後在ceph執行：ceph health 命令，不出意外就會輸出HEALTH_OK ，恭喜你 ceph三節點的叢集安裝成功！！！可以繼續進一步學習ceph了！！