2. 程式人生 > >mongodb主從配置及備份

mongodb主從配置及備份

阿新 • • 發佈：2018-04-17
分布式文件存儲 ase b- 操作 查看 ucc until and building

本文將介紹下mongodb主從配置及備份

MongoDB 是一個基於分布式文件存儲的數據庫。由 C++ 語言編寫。旨在為 WEB 應用提供可擴展的高性能數據存儲解決方案。
MongoDB 是一個介於關系數據庫和非關系數據庫之間的產品，是非關系數據庫當中功能最豐富，最像關系數據庫的。

主從服務器的實現原理

首先,主節點會把本服務的與寫有關的操作記錄下來,讀操來不記錄,這些操作就記錄在local數據庫中的oplog.$admin這個集合中,這是一個固定集合,大小是可以配置的,主要是通過配置oplogSize這個參數來實現,單位是M,大小一般為磁盤剩余空間的5%左右.因為是固定集合所以當固定集合放滿日誌的時候,新進來的日誌就會把最舊的日誌覆蓋掉,如果這個值設置的不合理,導致數據很快的被覆蓋,而從節點沒有來得及更新,這樣就會產生數據不同步的情況.設置為主節點的local數據庫有會有oplog.$admin與slave這兩個集合.slave記錄的是從節點的信息.
從節點與主節點的數據同步主要是從節點定時的會去連接主節點,請求主節點的操作日誌,從而對自己的數據副表進行同樣的操作來達到數據的同步.從節點的local數據庫中會多了source與me這兩個集合,source是記錄主節點的信息,me是記錄從節點的標識
技術分享圖片

環境配置

我這裏準備了2臺機器作為演示機
172.16.0.138    master
172.16.0.139    salve
系統版本為 centos 7.2

部署包地址

https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-3.6.3.tgz

解壓文件

[root@iZuf6ahuk73s2puww2elmpZ]# tar xf mongodb-linux-x86_64-rhel70-3.6.3.tgz 
[root@iZuf6ahuk73s2puww2elmpZ]# cd mongodb-linux-x86_64-rhel70-3.6.3/

建立數據目錄

[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# mkdir /opt/mongodb/data -p
[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# mkdir /opt/mongodb/logs -p

配置文件修改

# 設置數據文件的存放目錄
dbpath=/opt/mongodb/data
# 設置日誌文件的存放目錄及其日誌文件名
logpath=/opt/mongodb/logs/mongodb.log
# 設置端口號（默認的端口號是 27017）
master=true
# 設置為以守護進程的方式運行，即在後臺運行
fork=true
#監聽網卡
bind_ip= 0.0.0.0
#服務端口
port=27017
oplogSize=2048

啟動主庫

[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# ./bin/mongod -f mongodb.conf  
about to fork child process, waiting until server is ready for connections.
forked process: 5702
child process started successfully, parent exiting
[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# ps -ef |grep mongodb
root      5702     1  2 14:38 ?        00:00:00 ./bin/mongod -f mongodb.conf
root      5729  5601  0 14:39 pts/0    00:00:00 grep --color=auto mongodb

配置從庫

部署包從主庫上拷貝過來

建立數據目錄

[root@izuf6ahuk73s2puww2elmqz mongodb-linux-x86_64-rhel70-3.6.3]# mkdir /opt/mongodb/data -p
[root@izuf6ahuk73s2puww2elmqz mongodb-linux-x86_64-rhel70-3.6.3]# mkdir /opt/mongodb/logs -p

修改配置文件

# 設置數據文件的存放目錄
dbpath=/opt/mongodb/data
# 設置日誌文件的存放目錄及其日誌文件名
logpath=/opt/mongodb/logs/mongodb.log
# 設置為以守護進程的方式運行，即在後臺運行
fork=true
#服務端口
port=27017
bind_ip= 0.0.0.0
slave=true
source=172.16.0.138:27017
autoresync=true

啟動從庫

[root@izuf6ahuk73s2puww2elmqz mongodb-linux-x86_64-rhel70-3.6.3]# ./bin/mongod -f mongodb.conf 
about to fork child process, waiting until server is ready for connections.
forked process: 10233
child process started successfully, parent exiting
[root@izuf6ahuk73s2puww2elmqz mongodb-linux-x86_64-rhel70-3.6.3]# ps -ef |grep mongodb
root     10302     1  0 15:03 ?        00:00:09 ./bin/mongod -f mongodb.conf
root     10369 10210  0 15:38 pts/0    00:00:00 grep --color=auto mongodb
到這裏基本主從就配置完了,你可以查看主節點的local數據庫裏有沒有slave,oplog.$admin,從節點中有沒有source,me這幾個集合
接下來你可以主節點創建數據庫插入數據看看從節點是否同步過去了.這些都可以通過查看日誌來查看的

驗證結果

  • 主庫
[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# ./bin/mongo
MongoDB shell version v3.6.3
connecting to: mongodb://127.0.0.1:27017
MongoDB server version: 3.6.3
> db.printReplicationInfo();
configured oplog size:   2048MB
log length start to end: 1517secs (0.42hrs)
oplog first event time:  Mon Apr 16 2018 14:38:53 GMT+0800 (CST)
oplog last event time:   Mon Apr 16 2018 15:04:10 GMT+0800 (CST)
now:                     Mon Apr 16 2018 15:04:11 GMT+0800 (CST)
  • 從庫
[root@izuf6ahuk73s2puww2elmqz mongodb-linux-x86_64-rhel70-3.6.3]# ./bin/mongo
MongoDB shell version v3.6.3
connecting to: mongodb://127.0.0.1:27017
MongoDB server version: 3.6.3
Server has startup warnings: 

> db.printSlaveReplicationInfo()
source: 172.16.0.138:27017
    syncedTo: Mon Apr 16 2018 15:04:30 GMT+0800 (CST)
    7 secs (0 hrs) behind the freshest member (no primary available at the moment)

同步測試

  • 在主庫上插入數據
> use testsalve
switched to db testsalve
> db
testsalve
> db.testsalve.insert({"name" : "測試同步"})
WriteResult({ "nInserted" : 1 })
> show collections
testsalve
> db.testsalve.find().pretty()
{ "_id" : ObjectId("5ad44d090dd23b7a5c1a983f"), "name" : "測試同步" }
  • 從庫上查看是否同步
> rs.slaveOk();
> show dbs;
admin      0.000GB
config     0.000GB
local      0.000GB
testsalve  0.000GB
> use testsalve
switched to db testsalve
> db.testsalve.find().pretty()
{ "_id" : ObjectId("5ad44d090dd23b7a5c1a983f"), "name" : "測試同步" }
# 數據已同步過來

註意

salve節點默認是無法讀寫的，如果非要解決，方法如下：
在從庫執行
> rs.slaveOk();

備份

  • MongoDB數據庫備份
1、語法：
        mongodump -h dbhost -d dbname -o dbdirectory
        參數說明：
            -h： MongDB所在服務器地址，例如：127.0.0.1，當然也可以指定端口號：127.0.0.1:27017
            -d： 需要備份的數據庫實例，例如：test
            -o： 備份的數據存放位置，例如：/home/mongodump/，當然該目錄需要提前建立，這個目錄裏面存放該數據庫實例的備份數據。
  • 示例
#以下命令備份了testsalve庫到/opt/目錄下
[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# ./bin/mongodump -h 127.0.0.1:27017 -d testsalve -o /opt/
2018-04-16T15:19:54.779+0800    writing testsalve.testsalve to 
2018-04-16T15:19:54.780+0800    done dumping testsalve.testsalve (1 document)
#備份出來的文件
[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# ll /opt/testsalve/
total 8
-rw-r--r-- 1 root root  45 Apr 16 15:19 testsalve.bson
-rw-r--r-- 1 root root 133 Apr 16 15:19 testsalve.metadata.json

恢復

  • MongoDB數據庫恢復

1、語法： mongorestore -h dbhost -d dbname --dir dbdirectory 參數或名： -h： MongoDB所在服務器地址 -d： 需要恢復的數據庫實例，例如：test，當然這個名稱也可以和備份時候的不一樣，比如test2 --dir： 備份數據所在位置，例如：/opt --drop： 恢復的時候，先刪除當前數據，然後恢復備份的數據。就是說，恢復後，備份後添加修改的數據都會被刪除。

  • 示例
#先刪除當前庫
> use testsalve
switched to db testsalve
> db.dropDatabase()
{ "dropped" : "testsalve", "ok" : 1 }
#執行恢復
[root@iZuf6ahuk73s2puww2elmpZ mongodb-linux-x86_64-rhel70-3.6.3]# ./bin/mongorestore -h 127.0.0.1:27017 -d testsalve --dir  /opt/testsalve/
2018-04-16T15:23:27.416+0800    the --db and --collection args should only be used when restoring from a BSON file. Other uses are deprecated and will not exist in the future; use --nsInclude instead
2018-04-16T15:23:27.417+0800    building a list of collections to restore from /opt/testsalve dir
2018-04-16T15:23:27.418+0800    reading metadata for testsalve.testsalve from /opt/testsalve/testsalve.metadata.json
2018-04-16T15:23:27.440+0800    restoring testsalve.testsalve from /opt/testsalve/testsalve.bson
2018-04-16T15:23:27.449+0800    no indexes to restore
2018-04-16T15:23:27.449+0800    finished restoring testsalve.testsalve (1 document)
2018-04-16T15:23:27.449+0800    done
#查看恢復結果
> show dbs;
admin      0.000GB
config     0.000GB
local      0.000GB
testsalve  0.000GB
> use testsalve
switched to db testsalve
> db.testsalve.find().pretty()
{ "_id" : ObjectId("5ad44d090dd23b7a5c1a983f"), "name" : "測試同步" }

mongodb主從配置及備份

相關推薦

mongodb主從配置及備份

分布式文件存儲 ase b- 操作 查看 ucc until and building 本文將介紹下mongodb主從配置及備份 MongoDB 是一個基於分布式文件存儲的數據庫。由 C++ 語言編寫。旨在為 WEB 應用提供可擴展的高性能數據存儲解決方案。 Mongo

redis主從配置及手動切換遇到的問題

redis解析我做redis主從遇到的問題：redis只要下載好壓縮包後解壓縮然後make就可以直接使用了，啟動服務是：/usr/local/src/redis/src/redis-server然後進入交互界面是：/usr/lcoal/src/redis/src/reids-cli假如沒有更改port那麽默認

redis主從配置及切換

啟動 文件 con nbsp 數據同步 描述 fun sof don 環境描述：主redis：192.168.10.1 6379從redis：192.168.10.2 6380 一、主從配置 1、將主從redis配置文件redis.conf中的aemonize no 改為

Redis主從配置及主從切換

CA idf lis mon 分享圖片 說明 redis-cli dir nts 　　環境及部署圖 　　本次配置在同一臺主機配置文件及端口號不一樣 　　6379配置文件/etc/redis/6379.conf bind 0.0.0.0 protected-mode y

MariaDB實現主從配置及讀寫分離(一)

一、主從複製方案 1.  在兩臺CentOS7虛擬機器上分別部署MariaDB, 主資料庫伺服器IP為192.168.17.235, 從伺服器IP為192.168.17.238. 從伺服器通過調取主伺服器上binlog日誌, 在本地重建庫、表, 實現與主伺服器的AB複製. 二、步驟 1. 對兩

MongoDB安裝配置及使用

1、安裝配置：https://www.cnblogs.com/ymwangel/p/5859453.html 2、使用 from pymongo import MongoClient #連線 conn = MongoClient('127.0.0.1', 27017) #進入資料庫

MongoDB安裝配置及CRUD操作

1.下載 https://www.mongodb.com/download-center 本文下載版本：Windows Server 2008 R2 64-bit 2.安裝 預設安裝路徑：C:\Program Files\MongoDB\Server\3.2\bin 3.將

redis4.0.1主從配置及Sentinel配置自動Failover

一、單機版 1、前提條件 yum install gcc-c++  2、安裝redis wget http://download.redis.io/releases/redis-4.0.1.tar.gz tar -xf redis-4.0.1.tar.gz cd red

淺入淺出之redis主從配置及手動切換

環境描述： 主redis：192.168.10.1 6379 從redis：192.168.10.2 6380 一、主從配置 1、將主從redis配置檔案redis.conf中的aemonize no 改為 yes 2、修改從redis配置檔案redis.conf中

mongodb的安裝及主從配置

mkdir -p 集合 shell 運行 -s -m tle obj unit 一、mongodb安裝1.下載mongodblinux版本 https://www.mongodb.com/download-center#community2.解壓tar xvf mongod

mongodb安裝Windows服務、資料備份還原、資料失效、建立索引、主從配置

一、操作步驟①準備一個mongodb安裝包②在安裝目錄下建立資料夾、修改配置項③安裝、解除安裝windows服務④匯入(還原)、匯出(備份)資料(單集合、整個庫)⑤建立索引⑥設定資料自動失效⑦DDL語句⑧mongodb視覺化工具-Robomongo⑨ mongodb主從配置、

redis安裝及主從配置

redis；redis主從配置一、redis介紹 redis是一個key-value存儲系統。和Memcached類似，它支持存儲的value類型相對更多，包括string(字符串)、list(鏈表)、set(集合)和zset(有序集合)。這些數據類型都支持push/pop、add/remove及取交集並

MySql主從同步配置及實現

數據庫集群 授權 問題 show 不可 leg class status replicat mysql主從復制 隨著技術的發展，在實際的生產環境中，由單臺MySQL數據庫服務器不能滿足實際的需求。此時數據庫集群就很好的解決了這個問題了。采用MySQL分布式集群，能夠搭建一

Mongodb主從進行配置+auth

mongodb 主從 authMongodb主從進行配置+auth環境介紹master：172.17.165.245salve ：172.17.165.230版本 3.4註:這裏的安裝步驟進行省略了 家目錄在/usr/local/mongodb配置key文件cd /usr/local/mongodb/

MySQL主從介紹及配置

MySQL主從介紹及配置17.1 MySQL主從介紹 17.2 準備工作 17.3 配置主 17.4 配置從 17.5 測試主從同步 MySQL主從介紹及配置

mongodb的安裝及環境配置

網址 bubuko control nbsp 下載 層級 com exist install 一 下載 　　官網：https://fastdl.mongodb.org/win32/mongodb-win32-x86_64-2008plus-ssl-3.6.3-signed

MongoDB 通過配置文件啟動及註冊服務

-- net 需要 png pat 服務 系統服務 path 修改配置 1.配置mongodb環境變量，配置完成之後就可以直接執行mong、mongod等常用命令，不用每次都到mongodb安裝目錄bin下去執行； 2.通過命令啟動mongo服務 mongod --

MongoDB基本操作、備份還原及用戶管理

score 不同 文件的 進程命令 favicon 再次 ESS for 服務器 今日趁周末得空，將近日在學習的MongoDB數據庫常用命令作以下整理，方便工作中查看 MongoDB的邏輯結構主要由文檔、集合和數據庫三部分組成。其中文檔是MongoDB的核心概念，它是Mo

LINUX——關於mysql中較詳細的，數據庫的主從配置，自動備份以及讀寫分離的使用

rep lock ast name ocs lib .cn ket ger 1.主從簡介數據在企業中是非常重要的一部分，存儲數據的數據庫多種多用樣，但卻都存在著一種隱患·數據庫數據丟失·數據庫訪問人數較多時，一臺數據庫無法保證服務質量2.主從的作用·實時災備，用於故障切換·

CDH5.15.1 hive 連接mongodb配置及增刪改查

uri str prope upd info with oot ODB ble 1. 下載 wget http://repo1.maven.org/maven2/org/mongodb/mongo-hadoop/mongo-hadoop-hive/2.0.2/mongo-h