MongoDB3.6叢集搭建（分片+副本集）

分片則指為處理大量資料，將資料分開儲存，不同伺服器儲存不同的資料，它們的資料總和即為整個資料集。追求的是高效能。
在生產環境中，通常是這兩種技術結合使用，分片+副本集

環境準備
配置伺服器搭建副本集
三臺分片伺服器搭建副本集
配置路由伺服器
分片
測試
注意事項

1、環境準備

系統系統 centos7.0
三臺伺服器：192.168.221.130/131/132
安裝包： mongodb-linux-x86_64-3.6.3.tgz

伺服器130	伺服器131	伺服器132
mongos	mongos	mongos
config server	config server	config server
shard server1 主節點	shard server1副節點	shard server1 仲裁
shard server2 仲裁	shard server2主節點	shard server2 副節點
shard server3 副節點	shard server3 仲裁	shard server3 主節點

埠分配：mongos:23000 config:24000 shard1:25001 shard2:25002 shard3:25003

1.安裝mongodb(見另一部落格：mongodb 3.63（Linux CentOS 7安裝 )

2.分別在每臺機器建立conf、mongos、config、shard1、shard2、shard3六個目錄，因為mongos不儲存資料，只需要建立日誌檔案目錄即可。

mkdir -p /usr/local/mongodb/conf
mkdir -p /usr/local/mongodb/mongos/log
mkdir -p /usr/local/mongodb/config/data
mkdir -p /usr/local/mongodb/config/log
mkdir -p /usr/local/mongodb/shard1/data
mkdir -p /usr/local/mongodb/shard1/log
mkdir -p /usr/local/mongodb/shard2/data
mkdir -p /usr/local/mongodb/shard2/log
mkdir -p /usr/local/mongodb/shard3/data
mkdir -p /usr/local/mongodb/shard3/log
   
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10

這裡寫圖片描述
關閉三臺機器的防火牆

systemctl stop firewalld.service
   
    1

2、配置伺服器搭建副本集

Mongodb3.4以後要求配置伺服器也建立副本集，不然叢集搭建不成功。新增配置檔案。

vi /usr/local/mongodb/conf/config.conf
   
    1

進入後新增以下配置資訊

## 配置檔案內容
pidfilepath = /usr/local/mongodb/config/log/configsrv.pid
dbpath = /usr/local/mongodb/config/data
logpath = /usr/local/mongodb/config/log/congigsrv.log
logappend = true
bind_ip = 0.0.0.0
port = 24000
fork = true
#declare this is a config db of a cluster;
configsvr = true
#副本集名稱
replSet=configs
#設定最大連線數
maxConns=20000
   
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14

分別啟動三臺伺服器的config server，連線：進入/usr/local/mongodb/bin目錄下

./mongod -f /usr/local/mongodb/conf/config.conf
   
    1

登入任意一臺配置伺服器，初始化配置副本集，登入：進入/usr/local/mongodb/bin目錄下

./mongo --port 24000
   
    1

使用admin資料庫

use admin
   
    1

config變數：

config = {
...    _id : "configs",
...     members : [
...         {_id : 0, host : "192.168.221.130:24000" },
...         {_id : 1, host : "192.168.221.131:24000" },
...         {_id : 2, host : "192.168.221.132:24000" }
...     ]
... }
   
    1
    2
    3
    4
    5
    6
    7
    8

初始化副本集：

rs.initiate(config)
   
    1

這一步非常重要，必須初始化成功。不成功的話，路由伺服器與配置伺服器連線不上。
其中，”_id” : “configs”應與配置檔案中配置的 replicaction.replSetName 一致，”members” 中的 “host” 為三個節點的 ip 和 port。

3、三臺分片伺服器搭建副本集

配置分片副本集（三臺機器）。
1.設定第一個分片副本集
配置檔案：

vi /usr/local/mongodb/conf/shard1.conf
   
    1

配置：

#配置檔案內容
#——————————————–
pidfilepath = /usr/local/mongodb/shard1/log/shard1.pid
dbpath = /usr/local/mongodb/shard1/data
logpath = /usr/local/mongodb/shard1/log/shard1.log
logappend = true
bind_ip = 0.0.0.0
port = 25001
fork = true
#副本集名稱
replSet=shard1
#declare this is a shard db of a cluster;
shardsvr = true
#設定最大連線數
maxConns=20000
   
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15

啟動三臺伺服器的shard1 server，進入/usr/local/mongodb/bin目錄下：

./mongod -f /usr/local/mongodb/conf/shard1.conf
   
    1

登陸任意一臺伺服器，初始化副本集，進入/usr/local/mongodb/bin目錄下：

./mongo --port 25001
   
    1

使用admin資料庫

use admin
   
    1

定義副本集配置，第三個節點的 “arbiterOnly”:true 代表其為仲裁節點。

config = {
...    _id : "shard1",
...     members : [
...         {_id : 0, host : "192.168.221.130:25001" },
...         {_id : 1, host : "192.168.221.131:25001" },
...         {_id : 2, host : "192.168.221.132:25001” , arbiterOnly: true }
...     ]
... }
   
    1
    2
    3
    4
    5
    6
    7
    8

初始化副本集配置

rs.initiate(config);
   
    1

2.設定第二個分片
進入配置檔案

vi /usr/local/mongodb/conf/shard2.conf
   
    1

新增配置：

#配置檔案內容
#——————————————–
pidfilepath = /usr/local/mongodb/shard2/log/shard2.pid
dbpath = /usr/local/mongodb/shard2/data
logpath = /usr/local/mongodb/shard2/log/shard2.log
logappend = true
bind_ip = 0.0.0.0
port = 25002
fork = true
#副本集名稱
replSet=shard2
#declare this is a shard db of a cluster;
shardsvr = true
#設定最大連線數
maxConns=20000
   
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15

啟動三臺伺服器的shard2 server，進入/usr/local/mongodb/bin目錄下：

./mongod -f /usr/local/mongodb/conf/shard2.conf
   
    1

登陸任意一臺伺服器，進入/usr/local/mongodb/bin初始化副本集

./mongo --port 25002
   
    1

使用admin資料庫

use admin
   
    1

定義副本集配置

config = {
...    _id : "shard2",
...     members : [
...         {_id : 0, host : "192.168.221.130:25002"  , arbiterOnly: true },
...         {_id : 1, host : "192.168.221.131:25002" },
...         {_id : 2, host : "192.168.221.132:25002" }
...     ]
... }
   
    1
    2
    3
    4
    5
    6
    7
    8

初始化副本集配置

rs.initiate(config);
   
    1

設定第三個分片副本集
配置檔案程式碼如下：

vi /usr/local/mongodb/conf/shard3.conf
   
    1

進入配置：

#配置檔案內容
#——————————————–
pidfilepath = /usr/local/mongodb/shard3/log/shard3.pid
dbpath = /usr/local/mongodb/shard3/data
logpath = /usr/local/mongodb/shard3/log/shard3.log
logappend = true
bind_ip = 0.0.0.0
port = 25003
fork = true
#副本集名稱
replSet=shard3
#declare this is a shard db of a cluster;
shardsvr = true
#設定最大連線數
maxConns=20000
   
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15

啟動三臺伺服器的shard3 server，進入/usr/local/mongodb/bin目錄下：

./mongod -f /usr/local/mongodb/conf/shard3.conf
   
    1

登陸任意一臺伺服器，初始化副本集

./mongo --port 25003
   
    1

使用admin資料庫

use admin
   
    1

定義副本集配置

config = {
...    _id : "shard3",
...     members : [
...         {_id : 0, host : "192.168.221.130:25003" },
...         {_id : 1, host : "192.168.221.131:25003" , arbiterOnly: true},
...         {_id : 2, host : "192.168.221.132:25003" }
...     ]
... }
   
    1
    2
    3
    4
    5
    6
    7
    8

初始化副本集配置

rs.initiate(config);
   
    1

4、配置路由伺服器

先啟動配置伺服器和分片伺服器,後啟動路由例項啟動路由例項:（三臺機器）

vi /usr/local/mongodb/conf/mongos.conf
   
    1

配置：

#內容
pidfilepath = /usr/local/mongodb/mongos/log/mongos.pid
logpath = /usr/local/mongodb/mongos/log/mongos.log
logappend = true
bind_ip = 0.0.0.0
port = 23000
fork = true
#監聽的配置伺服器,只能有1個或者3個 configs為配置伺服器的副本集名字
configdb = configs/192.168.221.130:24000,192.168.221.131:24000,192.168.221.131:24000
#設定最大連線數
maxConns=20000
   
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11

啟動三臺伺服器的mongos server，進入/usr/local/mongodb/bin目錄下：

./mongos -f /usr/local/mongodb/conf/mongos.conf
   
    1

5、分片

目前搭建了mongodb配置伺服器、路由伺服器，各個分片伺服器，不過應用程式連線到mongos路由伺服器並不能使用分片機制，還需要在程式裡設定分片配置，讓分片生效。
登陸任意一臺mongos，進入/usr/local/mongodb/bin目錄下

./mongo --port 23000
   
    1

使用admin資料庫

use  admin
   
    1

串聯路由伺服器與分配副本集

sh.addShard("shard1/192.168.221.130:25001,192.168.221.131:25001,192.168.221.132:25001")
sh.addShard("shard2/192.168.221.130:25002,192.168.221.131:25002,192.168.221.132:25002")
sh.addShard("shard3/192.168.221.130:25003,192.168.221.131:25003,192.168.221.132:25003")
   
    1
    2
    3

檢視叢集狀態

sh.status()
   
    1

6、測試

目前配置服務、路由服務、分片服務、副本集服務都已經串聯起來了，但我們的目的是希望插入資料，資料能夠自動分片。連線在mongos上，準備讓指定的資料庫、指定的集合分片生效。
指定testdb分片生效

db.runCommand( { enablesharding :"testdb"});
   
    1

這裡寫圖片描述
指定資料庫裡需要分片的集合和片鍵

db.runCommand( { shardcollection : "testdb.table1",key : {id: “hashed”} } )
   
    1

這裡寫圖片描述
我們設定testdb的 table1 表需要分片，根據 id 自動分片到 shard1 ，shard2，shard3 上面去。要這樣設定是因為不是所有mongodb 的資料庫和表都需要分片！插入100000條資料測試：

檢視分配狀態

db.table1.stats();
   
    1

如下圖所示：shard1總數：33755條
這裡寫圖片描述
Shard2總數：33143條

Shard3總數：33102條

7、注意事項

出現如下問題，說明初始化沒有成功，如果初始化沒有成功會導致後面路由伺服器啟動不了
這裡寫圖片描述
出現如下問題需要關閉程序。重啟服務

上述一臺伺服器不能初始化，可以選擇另一臺（配置可以選取任何一臺）