高效實用，在centos7上搭建MFS分布式文件系統
阿新 • • 發佈：2018-07-27
使用 原理 source 網絡 組成 tar zxvf sha 變量 系統搭建 MFS原理:
MFS是一個具有容錯性的網絡分布式文件系統，他把數據分散存放在多個物理服務器上，而呈現給用戶的則是一個統一的資源
-
MFS文件系統組成：
1、元數據服務器（master）
2、元數據日誌服務器（metalogger）
3、數據存儲服務器（chunk server）
4、客戶端（client）下面進行MFS分布式文件系統搭建演示
案列環境: master server： 192.168.100.128 metalogger server：192.168.100.134 chunk server： 192.168.100.132(可以是多臺) client: 192.168.100.131
一、搭建Master Server
（1）下載源碼包和安裝準備
[root@localhost ~]# systemctl stop firewalld.service
[root@localhost ~]# setenforce 0
[root@localhost ~]# yum install gcc gcc-c++ zlib-devel -y（2）創建用戶
[root@localhost ~]# useradd -s /sbin/nologin mfs（3）安裝源碼包
[root@localhost ~]# mkdir /abc [root@localhost ~]# mount.cifs //192.168.100.1/yjs /abc Password for root@//192.168.100.1/yjs: [root@localhost ~]# cd /abc [root@localhost abc]# ls mfs-1.6.27-5.tar.gz [root@localhost abc]# tar zxvf mfs-1.6.27-5.tar.gz -C /opt [root@localhost abc]# cd /opt/mfs-1.6.27/ [root@localhost mfs-1.6.27]# ./config > --prefix=/usr/local/mfs > --with-default-user=mfs > --with-default-group=mfs > --disable-mfschunkserver > --disable-mfsmount [root@localhost mfs-1.6.27]# make [root@localhost mfs-1.6.27]# make install
（4）復制文件
[root@localhost mfs]# ls mfsexports.cfg.dist mfsmaster.cfg.dist mfsmetalogger.cfg.dist mfstopology.cfg.dist [root@localhost mfs]# ll 總用量 16 -rw-r--r--. 1 root root 4060 7月 26 16:39 mfsexports.cfg.dist -rw-r--r--. 1 root root 1020 7月 26 16:39 mfsmaster.cfg.dist -rw-r--r--. 1 root root 417 7月 26 16:39 mfsmetalogger.cfg.dist -rw-r--r--. 1 root root 1123 7月 26 16:39 mfstopology.cfg.dist [root@localhost mfs]# cp mfsexports.cfg.dist mfsexports.cfg [root@localhost mfs]# cp mfsmaster.cfg.dist mfsmaster.cfg //掛載權限 [root@localhost mfs]# cp mfstopology.cfg.dist mfstopology.cfg //架構感知 [root@localhost mfs]# cd /usr/local/mfs/var/mfs/ [root@localhost mfs]# ls metadata.mfs.empty [root@localhost mfs]# cp metadata.mfs.empty metadata.mfs //防異常退出
（5）啟動Master Server
[root@localhost mfs]# /usr/local/mfs/sbin/mfsmaster start
[root@localhost mfs]# ps -ef |grep mfs
mfs 6699 1 2 16:46 ? 00:00:01 /usr/local/mfs/sbin/mfsmaster start
root 6715 1493 0 16:47 pts/0 00:00:00 grep --color=auto mfs //檢查是否啟動
/usr/local/mfs/sbin/mfsmaster -s //停止Master Server的命令二、搭建 Metalogger Server
（1）下載源碼包及安裝準備
[root@localhost ~]# systemctl stop firewalld.service
[root@localhost ~]# setenforce 0
[root@C-7-4 ~]# yum install gcc gcc-c++ zlib-devel -y（2）創建用戶
[root@C-7-4 ~]# useradd -s /sbin/nologin mfs（3）安裝源碼包
[root@localhost ~]# mkdir /abc
[root@localhost ~]# mount.cifs //192.168.100.1/yjs /abc
Password for root@//192.168.100.1/yjs:
[root@localhost ~]# cd /abc
[root@localhost abc]# ls
mfs-1.6.27-5.tar.gz
[root@localhost abc]# tar zxvf mfs-1.6.27-5.tar.gz -C /opt
[root@localhost abc]# cd /opt/mfs-1.6.27/
[root@localhost mfs-1.6.27]# ./config > --prefix=/usr/local/mfs > --with-default-user=mfs > --with-default-group=mfs > --disable-mfschunkserver > --disable-mfsmount
[root@localhost mfs-1.6.27]# make
[root@localhost mfs-1.6.27]# make install（4）復制文件
[root@C-7-4 mfs-1.6.27]# cd /usr/local/mfs/etc/mfs/
[root@C-7-4 mfs]# ll
總用量 16
-rw-r--r--. 1 root root 4060 7月 26 18:00 mfsexports.cfg.dist
-rw-r--r--. 1 root root 1020 7月 26 18:00 mfsmaster.cfg.dist
-rw-r--r--. 1 root root 417 7月 26 18:00 mfsmetalogger.cfg.dist
-rw-r--r--. 1 root root 1123 7月 26 18:00 mfstopology.cfg.dist
[root@C-7-4 mfs]# cp mfsmetalogger.cfg.dist mfsmetalogger.cfg
[root@C-7-4 mfs]# cd /usr/local/mfs/var/mfs/
[root@C-7-4 mfs]# ls
metadata.mfs.empty
[root@C-7-4 mfs]# cp metadata.mfs.empty metadata.mfs //同樣需要設置防異常退出（5）修改metalogger server配置文件
[root@C-7-4 mfs]# vim mfsmetalogger.cfg
MASTER_HOST = 192.168.100.128 //改為Master Server的ip地址（6）開啟Metalogger Server服務
[root@C-7-4 mfs]# /usr/local/mfs/sbin/mfsmetalogger start
[root@C-7-4 mfs]# ps -ef |grep mfs
mfs 6465 1 0 18:03 ? 00:00:00 /usr/local/mfs/sbin/mfsmetalogger start
root 6467 1497 0 18:04 pts/0 00:00:00 grep --color=auto mfs //檢測是否開啟
/usr/local/mfs/sbin/mfschunkserver -s //停止Metalogger Server的命令三、搭建Chunk Server
（1）下載源碼包及安裝準備
[root@localhost ~]# systemctl stop firewalld.service
[root@localhost ~]# setenforce 0
[root@localhost ~]# yum install gcc gcc-c++ zlib-devel -y（2）創建用戶
[root@C-7-4 ~]# useradd -s /sbin/nologin mfs（3）安裝源碼包
[root@localhost ~]# mkdir /abc
[root@localhost ~]# mount.cifs //192.168.100.1/yjs /abc
Password for root@//192.168.100.1/yjs:
[root@localhost ~]# cd /abc
[root@localhost abc]# ls
mfs-1.6.27-5.tar.gz
[root@localhost abc]# tar zxvf mfs-1.6.27-5.tar.gz -C /opt
[root@localhost abc]# cd /opt/mfs-1.6.27/
[root@localhost mfs-1.6.27]# ./config > --prefix=/usr/local/mfs > --with-default-user=mfs > --with-default-group=mfs > --disable-mfsmaster > --disable-mfsmount
[root@localhost mfs-1.6.27]# make
[root@localhost mfs-1.6.27]# make install（4）復制文件
[root@localhost mfs-1.6.27]# cd /usr/local/mfs/etc/mfs/
[root@localhost mfs]# ls
mfschunkserver.cfg.dist mfshdd.cfg.dist
[root@localhost mfs]# cp mfschunkserver.cfg.dist mfschunkserver.cfg
[root@localhost mfs]# cp mfshdd.cfg.dist mfshdd.cfg（5）修改配置文件
[root@localhost mfs]# vim mfschunkserver.cfg
MASTER_HOST = 192.168.100.128 //改為Master Server的ip地址
[root@localhost mfs]# vim mfshdd.cfg
/data //在這裏/data是一個給mfs的分區，最好使用獨立的分區或磁盤掛載到此目錄（6）創建掛載目錄並賦予權限
[root@localhost mfs]# mkdir /data
[root@localhost mfs]# chown -R mfs.mfs /data（7）啟動 Chunk Server
[root@localhost mfs]# /usr/local/mfs/sbin/mfschunkserver start
[root@localhost mfs]# ps -ef | grep mfs
mfs 7366 1 3 18:12 ? 00:00:00 /usr/local/mfs/sbin/mfschunkserver start
root 7392 1455 0 18:12 pts/0 00:00:00 grep --color=auto mfs四、配置客戶端
（1）下載源碼包和安裝準備
[root@localhost ~]# systemctl stop firewalld.service
[root@localhost ~]# setenforce 0
[root@localhost ~]# yum install gcc gcc-c++ zlib-devel -y（2）安裝FUSE源碼包
[root@localhost ~]# tar xzvf fuse-2.9.2.tar.gz -C /opt
[root@localhost ~]# cd /opt/fuse-2.9.7/
[root@localhost fuse-2.9.2]# ./configure
[root@localhost fuse-2.9.2]# make
[root@localhost fuse-2.9.2]# make install
設置環境變量：
[root@localhost fuse-2.9.2]#vi /etc/profile
export PKG_CONFIG_PATH=/usr/local/lib/pkgconfig:$PKG_CONFIG_PATH
[root@localhost fuse-2.9.2]#source /etc/profile //刷新文件使生效（3）安裝MFS客戶端
[root@localhost fuse-2.9.2]# useradd -s /sbin/nologin mfs
[root@localhost abc]# tar zxvf mfs-1.6.27-5.tar.gz -C /opt
[root@localhost abc]# cd /opt/mfs-1.6.27/
[root@localhost mfs-1.6.27]# ./configure > --prefix=/usr/local/mfs > --with-default-user=mfs > --with-default-group=mfs > --disable-mfsmaster > --disable-mfschunkserver > --enable-mfsmount
[root@localhost mfs-1.6.27]# make
[root@localhost mfs-1.6.27]# make install（4）掛載MFS文件系統
[root@localhost mfs-1.6.27]# mkdir /opt/mfs
[root@localhost mfs-1.6.27]# modprobe fuse
[root@localhost mfs-1.6.27]# /usr/local/mfs/bin/mfsmount /opt/mfs -H 192.168.100.128
[root@localhost mfs-1.6.27]# df -TH
文件系統 類型 容量 已用 可用 已用% 掛載點
192.168.100.128:9421 fuse.mfs 6.4G 0 6.4G 0% /opt/mfs（5）優化客戶端
[root@localhost mfs-1.6.27]#vi /etc/profile
export PATH=/usr/local/mfs/bin:$PATH
[root@localhost mfs-1.6.27]#source /etc/profile
[root@localhost mfs-1.6.27]# mfsgetgoal -r /opt/mfs/
/opt/mfs/:
directories with goal 1 : 1 //mfsgetgoal命令用來查詢文件被復制的份數，-r表示遞歸，goal指文件被復制的份數五、MFS監控
Mfscgiserv是用python語言編寫的一個web服務器，監聽端口為9425，可以在Master Server上通過命令 /usr/local/mfs/sbin/mfscgiserv來啟動。
在客戶端上通過瀏覽器訪問http：Master Server_ip:9425查看
高效實用，在centos7上搭建MFS分布式文件系統