Centos7上安裝FastDFS
一、概念
tracker-server:
跟蹤伺服器, 主要做排程工作, 起負載均衡的作用。 在記憶體中記錄叢集中所有儲存組和儲存伺服器的狀態資訊, 是客戶端和資料伺服器互動的樞紐。 相比GFS中的master更為精簡, 不記錄檔案索引資訊, 佔用的記憶體量很少。
storage-server:
儲存伺服器( 又稱:儲存節點或資料伺服器) , 檔案和檔案屬性( metadata) 都儲存到儲存伺服器上。 Storage server直接利用OS的檔案系統呼叫管理檔案。
group:
組, 也可稱為卷。 同組內伺服器上的檔案是完全相同的 ,同一組內的storage server之間是對等的, 檔案上傳、 刪除等操作可以在任意一臺storage server上進行 。
meta data:
檔案相關屬性,鍵值對( Key Value Pair) 方式,如:width=1024,heigth=768 。
二、部署
192.168.1.177安裝fastdfs的tracker節點,以及nginx反向代理伺服器用於下載服務。
192.168.1.188,192.168.1.189安裝fastdfs的storage節點,預設分一組,一組內兩臺機器互為備份.
注意:為了做到高可用,一個group建議分為兩臺以上的機器。
三、編譯和安裝所需的依賴包
# yum install make cmake gcc gcc-c++
四.安裝 libfastcommon
1、下載:
wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz
2、解壓
將 libfastcommonV1.0.7.tar.gz解壓至/usr/local/下:
tar -zxvf libfastcommonV1.0.7.tar.gz -C /usr/local/
3、切換目錄到:/usr/local/libfastcommon-1.0.7/ 下,接著進行編譯和安裝;
cd /usr/local/libfastcommon-1.0.7/ ./make.sh #編譯 ./make.sh install #安裝
安裝後的截圖:
4、libfastcommon安裝好後會在/usr/lib64 目錄下生成 libfastcommon.so 庫檔案;
注意:由於FastDFS程式引用usr/lib目錄所以需要將/usr/lib64下的庫檔案拷貝至/usr/lib下。
cp libfastcommon.so /usr/lib
五、安裝tracker,即安裝FastDFS
1、下載安裝 FastDFS,這裡也是通過wget下載。
wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz
2、將5.05.tar.gz 解壓至/usr/local/下
tar -zxvf V5.05.tar.gz -C /usr/local
3、切換目錄到: /usr/local/fastdfs-5.05/ 下即解壓後的目錄,編譯和安裝;
cd /usr/local/fastdfs-5.05
./make.sh
./make.sh install
安裝後的截圖:
4、安裝成功將安裝目錄下的conf下的檔案拷貝到/etc/fdfs/下;
cp /usr/local/fastdfs-5.05/conf/* /etc/fdfs/
六、配置和啟動tracker
(1)切換目錄到: /etc/fdfs/ 目錄下;
(2)拷貝一份新的tracker配置檔案
cp tracker.conf.sample tracker.conf
(3)修改tracker.conf ; vim tracker.conf
base_path=/home/yuqing/fastdfs 改為: base_path=/home/fastdfs http.server_port 改為: 80
base_path=/home/fastdfs
http.server_port=80 #配置http埠
(4)建立 /home/fastdfs 目錄
mkdir /home/fastdfs
(5)啟動tracker,執行如下命令:
/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart
注意:在/home/fastdfs/ 目錄下生成兩個目錄, 一個是資料,一個是日誌;
七、配置和啟動storage
由於上面已經安裝過FastDFS,這裡只需要配置storage就好了;
(1)切換目錄到: /etc/fdfs/ 目錄下;
(2)拷貝一份新的storage配置檔案
cp storage.conf.sample storage.conf
(3)修改storage.conf ; vim storage.conf
group_name=group1 #配置組名 base_path=/home/yuqing/fastdfs 改為: base_path=/home/fastdfs #store存放檔案的位置(store_path) store_path0=/home/yuqing/fastdfs 改為: store_path0=/home/fdfs_storage #如果有多個掛載磁碟則定義多個store_path,如下 #store_path1=..... #store_path2=...... #配置tracker伺服器:IP tracker_server=192.168.172.20:22122 #如果有多個則配置多個tracker #tracker_server=192.168.101.4:22122 #配置http埠 http.server_port=88
(4)建立 /home/fdfs_storage 目錄
mkdir /home/fdfs_storage
(5)啟動storage, 執行命令如下:
/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart
啟動完成後進入 /home/fdfs_storage/data 目錄下,顯示目錄如下:
八、使用FastDFS自帶工具測試
(1)切換目錄到 /etc/fdfs/ 目錄下;
(2)拷貝一份新的client配置檔案
cp client.conf.sample client.conf
(3)修改client.conf ; vim client.conf,修改基本路徑和tracker_server如下:
注意:若tracker有多個,可以配置多個,如下:
#tracker_server=......
#tracker_server=...... (4)拷貝一張圖片wo.jpg 到Centos伺服器上的 / 目錄下;
(5)進行測試,執行如下:(執行測試程式,讀取/etc/fdfs/client.conf 檔案,上傳/home目錄下的.jpg檔案)
/usr/bin/fdfs_test /etc/fdfs/client.conf upload /home/wo.jpg
結果如下,表示搭建成功;
以上圖中的檔案地址:http://192.168.172.20/group1/M00/00/00/wKisFFpBG9eAHaQvAAAWKd1hQR4158_big.jpg 對應storage伺服器上的/home/fdfs_storage/data/00/00/wKisFFpBG9eAHaQvAAAWKd1hQR4158_big.jpg檔案;
由於現在還沒有和nginx整合無法使用http下載。
九、FastDFS 和nginx整合
1 在tracker上安裝 nginx
在每個tracker上安裝nginx,的主要目的是做負載均衡及實現高可用。如果只有一臺tracker可以不配置nginx。
一個tracker對應多個storage,通過nginx對storage負載均衡;
2 在storage 上安裝nginx
1.下載 fastdfs-nginx-module,這裡是通過wget下載(我喜歡這種方式)。
wget https://github.com/happyfish100/fastdfs-nginx-module/archive/master.zip
2、解壓 fastdfs-nginx-module.tar.gz 到 /usr/local目錄下;
unzip -o master.zip -d /usr/local
3、切換目錄到: /usr/local/fastdfs-nginx-module-master/src/ 目錄下
cd /usr/local/fastdfs-nginx-module-master/src/
4、修改config檔案,將檔案中的所有 /usr/local/ 路徑改為 /usr/
修改完成後:
5、將fastdfs-nginx-module-/src下的mod_fastdfs.conf拷貝至/etc/fdfs/下
cp mod_fastdfs.conf /etc/fdfs/
6、並修改 /etc/fdfs/mod_fastdfs.conf 的內容;vi /etc/fdfs/mod_fastdfs.conf
base_path=/tmp 修改為 base_path=/home/fastdfs
base_path=/home/fastdfs
tracker_server=192.168.172.20:22122
#tracker_server=192.168.172.20:22122 #(多個tracker配置多行)
url_have_group_name=true #url中包含group名稱
store_path0=/home/fdfs_storage #指定檔案儲存路徑(上面配置的store路徑)
(7)將libfdfsclient.so拷貝至/usr/lib下
cp /usr/lib64/libfdfsclient.so /usr/lib/
(8)建立nginx/client目錄
mkdir -p /var/temp/nginx/client
十、Nginx的安裝
1、下載:
wget-c https://nginx.org/download/nginx-1.10.1.tar.gz
(2)解壓 nginx-1.10.1.tar.gz 到 /usr/local目錄下;
tar -zxvf nginx-1.10.1.tar.gz -C /usr/local/
(3)安裝nginx的依賴庫
yum install pcre
yum install pcre-devel
yum install zlib
yum install zlib-devel
yum install openssl
yum install openssl-devel
(4)進入nginx解壓的目錄下:cd /usr/local/nginx-1.10.1/
(5)加入模組命令配置
./configure --prefix=/usr/local/nginx
(6)編譯並安裝
make && make install
安裝成功後檢視生成的目錄,如下所示:
(7)拷貝配置檔案到 /etc/fdfs 下;
cd /usr/local/fastdfs-5.05/conf
cp http.conf mime.types /etc/fdfs/
(8)修改nginx配置檔案
mkdir /usr/local/nginx/logs # 建立logs目錄
cd /usr/local/nginx/conf/
vim nginx.conf
做如下的修改:
說明:
(a.) server_name指定本機ip;
(b.) location /group1/M00/:group1為nginx 服務FastDFS的分組名稱,M00是FastDFS自動生成編號,對應store_path0=/home/fdfs_storage,如果FastDFS定義store_path1,這裡就是M01
(9)nginx的啟動
cd /usr/local/nginx/sbin/
./nginx
查詢nginx程序
(10) fastdfs 和 nginx 服務的開機自啟動: http://www.cnblogs.com/yufeng218/p/8215381.html
9、在瀏覽器中訪問上傳到fastDFS的圖片
因為Centos系統有防火牆,需要先關閉掉,才可以在瀏覽器中訪問;
(1)CentOS 7.0預設使用的是firewall作為防火牆;若沒有啟用iptables 作為防火牆,則使用以下方式關閉防火牆:
systemctl stop firewalld.service #停止firewall systemctl disable firewalld.service #禁止firewall開機啟動 firewall-cmd --state #檢視預設防火牆狀態(關閉後顯示notrunning,開啟後顯示running)
(2)若已經啟用iptables作為防火牆,則使用以下方式關閉:
service iptables stop #臨時關閉防火牆 chkconfig iptables off #永久關閉防火牆
防火牆的相關連結:http://www.jb51.net/article/101576.htm
http://www.linuxidc.com/Linux/2015-05/117473.htm
(3)在谷歌瀏覽器中訪問剛才上傳的圖片:
剛才上傳的圖片地址為:http://192.168.172.20/group1/M00/00/00/wKisFFpBG9eAHaQvAAAWKd1hQR4158_big.jpg
參考文章: