2. 程式人生 > >ETCD資料備份與恢復驗證

ETCD資料備份與恢復驗證

阿新 • • 發佈：2018-12-19

ETCD資料備份與恢復驗證

一、單機

說明：執行etcd備份資料的恢復的機器必須和原先etcd所在機器一致

1、單機備份

ETCDCTL_API=3 etcdctl --endpoints="https://10.25.72.62:2379" \
        --cert=/etc/etcd/ssl/etcd.pem \
        --key=/etc/etcd/ssl/etcd-key.pem \
        --cacert=/etc/kubernetes/ssl/ca.pem \
        snapshot save snapshot.db

2、單機資料恢復

[[email protected]
 
 ~]# systemctl stop etcd   # 停止etcd服務
[[email protected] ~]# export ETCDCTL_API=3; # 使用ETCDCTL API 3
[[email protected] ~]# etcdctl  snapshot restore snapshot.db \
        --name=SZD-L0105331 \
        --endpoints=https://10.25.72.62:2379 \
        --cacert=/etc/kubernetes/ssl/ca.pem \
        --cert=/etc/etcd/ssl/etcd.pem \
        --key=/etc/etcd/ssl/etcd-key.pem  \
        --initial-cluster=SZD-L0105331=https://10.25.72.62:2380  \
        --initial-advertise-peer-urls=https://10.25.72.62:2380 \
        --initial-cluster-token=etcd-cluster-0 \
        --data-dir=/var/lib/etcd4   # 注意--data-dir引數,以下步驟需要使用

[
 
[email protected] ~]# # 修改etcd啟動引數--data-dir指向上一步的資料回覆目錄，一般在/etc/etcd/etcd檔案中

[[email protected] ~]# cat /etc/etcd/etcd  # 完整引數檔案如下
ETCD_OPTIONS="--name=SZD-L0105331 \
   --client-cert-auth=true \
   --cert-file=/etc/etcd/ssl/etcd.pem \
   --key-file=/etc/etcd/ssl/etcd-key.pem \
   --peer-cert-file=/etc/etcd/ssl/etcd.pem \
   --peer-key-file=/etc/etcd/ssl/etcd-key.pem \
   --trusted-ca-file=/etc/kubernetes/ssl/ca.pem \
   --peer-trusted-ca-file=/etc/kubernetes/ssl/ca.pem \
   --initial-advertise-peer-urls=https://10.25.72.62:2380 \
   --listen-peer-urls=https://10.25.72.62:2380 \
   --listen-client-urls=https://10.25.72.62:2379,https://127.0.0.1:2379 \
   --advertise-client-urls=https://10.25.72.62:2379 \
   --initial-cluster-token=etcd-cluster-0 \
   --initial-cluster=SZD-L0105331=https://10.25.72.62:2380 \
   --initial-cluster-state=new \
   --data-dir=/var/lib/etcd"

[
 
[email protected] ~]# systemctl start etcd # 啟動etcd服務

二、叢集

1、模擬寫入資料到Etcd叢集

# 使用API 3寫入資料庫
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --endpoints="https://10.25.84.251:2379,https://10.25.73.25:2379,https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem put /name/1 zxg
# 讀取資料
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --endpoints="https://10.25.84.251:2379,https://10.25.73.25:2379,https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem get  /name/1
2018-08-16 20:47:13.017586 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
/name/1
zxg

# 使用API 2寫入資料庫
[[email protected] etcd-cluster]# ETCDCTL_API=2 etcdctl --cert-file /root/etcd-cluster/etcd.pem --ca-file /root/etcd-cluster/ca.pem --key-file /root/etcd-cluster/etcd-key.pem --endpoints="https://10.25.73.25:2379,https://10.25.73.150:2379,https://10.25.84.251:2379" set /name1 zxg1
2018-08-16 18:27:35.060559 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
zxg1
# 讀取資料
[[email protected] etcd-cluster]# ETCDCTL_API=2 etcdctl --cert-file /root/etcd-cluster/etcd.pem --ca-file /root/etcd-cluster/ca.pem --key-file /root/etcd-cluster/etcd-key.pem --endpoints="https://10.25.73.25:2379,https://10.25.73.150:2379,https://10.25.84.251:2379" get /name1
2018-08-16 18:27:47.884908 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
zxg1

2、備份etcd資料

[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --endpoints="https://10.25.84.251:2379,https://10.25.73.25:2379,https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem  snapshot save mysnapshot.db
2018-08-16 20:50:47.206334 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
Snapshot saved at mysnapshot.db
[[email protected] etcd-cluster]#

3、停止etcd叢集

  • 停止方法：分別在3臺etcd的宿主機上執行以下命令停止etcd服務
systemctl stop etcd
  • 停掉Leader 10.25.73.25， 檢視叢集狀況，重新選舉出了leader，叢集可正常使用
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --endpoints="https://10.25.84.251:2379,https://10.25.73.25:2379,https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem  endpoint status --write-out=table
2018-08-16 18:31:50.686352 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
Failed to get the status of endpoint https://10.25.73.25:2379 (context deadline exceeded)
+---------------------------+------------------+---------+---------+-----------+-----------+------------+
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | RAFT TERM | RAFT INDEX |
+---------------------------+------------------+---------+---------+-----------+-----------+------------+
| https://10.25.84.251:2379 | 2a53eb67dfa37cc0 | 3.1.10  | 25 kB   | false     |        14 |         19 |
| https://10.25.73.150:2379 | c267a0ca02c6bff7 | 3.1.10  | 25 kB   | true      |        14 |         19 |
+---------------------------+------------------+---------+---------+-----------+-----------+------------+
[[email protected] etcd-cluster]#
  • 停掉10.25.73.150，檢視叢集狀況，叢集已經無法正常使用，說明3節點的Etcd容錯為1
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --endpoints="https://10.25.84.251:2379,https://10.25.73.25:2379,https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem  endpoint status --write-out=table
2018-08-16 18:33:44.526382 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
Failed to get the status of endpoint https://10.25.73.25:2379 (context deadline exceeded)
Failed to get the status of endpoint https://10.25.73.150:2379 (context deadline exceeded)
+---------------------------+------------------+---------+---------+-----------+-----------+------------+
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | RAFT TERM | RAFT INDEX |
+---------------------------+------------------+---------+---------+-----------+-----------+------------+
| https://10.25.84.251:2379 | 2a53eb67dfa37cc0 | 3.1.10  | 25 kB   | false     |        14 |         19 |
+---------------------------+------------------+---------+---------+-----------+-----------+------------+
  • 刪除etcd資料，方法：登入etcd所在主機執行：(注意：危險操作，請謹慎操作，確保在有資料備份並且確定Etcd叢集無法正常工作後操作)
rm -rf /var/lib/etcd

4、使用備份資料進行恢復

  • 恢復10.25.84.251節點資料到/var/lib/etcd
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --name=SZD-L0097856 --endpoints="https://10.25.84.251:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem --initial-cluster-token=etcd-cluster-0 --initial-advertise-peer-urls=https://10.25.84.251:2380 --initial-cluster=SZD-L0101798=https://10.25.73.25:2380,SZD-L0103739=https://10.25.73.150:2380,SZD-L0097856=https://10.25.84.251:2380 --data-dir=/varlib/etcd snapshot restore mysnapshot.db
2018-08-16 19:52:33.409406 I | etcdserver/membership: added member 2a53eb67dfa37cc0 [https://10.25.84.251:2380] to cluster 4741a9e2cf17e1fa
2018-08-16 19:52:33.409481 I | etcdserver/membership: added member 304bcbfa92e84c75 [https://10.25.73.25:2380] to cluster 4741a9e2cf17e1fa
2018-08-16 19:52:33.409499 I | etcdserver/membership: added member c267a0ca02c6bff7 [https://10.25.73.150:2380] to cluster 4741a9e2cf17e1fa
[[email protected] etcd-cluster]#
  • 恢復10.25.73.25節點資料到/var/lib/etcd
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --name=SZD-L0101798 --endpoints="https://10.25.73.25:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem --initial-cluster-token=etcd-cluster-0 --initial-advertise-peer-urls=https://10.25.73.25:2380 --initial-cluster=SZD-L0101798=https://10.25.73.25:2380,SZD-L0103739=https://10.25.73.150:2380,SZD-L0097856=https://10.25.84.251:2380 --data-dir=/varlib/etcd snapshot restore mysnapshot.db
2018-08-16 19:55:30.735518 I | etcdserver/membership: added member 2a53eb67dfa37cc0 [https://10.25.84.251:2380] to cluster 4741a9e2cf17e1fa
2018-08-16 19:55:30.735601 I | etcdserver/membership: added member 304bcbfa92e84c75 [https://10.25.73.25:2380] to cluster 4741a9e2cf17e1fa
2018-08-16 19:55:30.735617 I | etcdserver/membership: added member c267a0ca02c6bff7 [https://10.25.73.150:2380] to cluster 4741a9e2cf17e1fa
[[email protected] etcd-cluster]#
  • 恢復10.25.73.150節點資料到/var/lib/etcd
[[email protected] etcd-cluster]# ETCDCTL_API=3 etcdctl --name=SZD-L0103739 --endpoints="https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem --initial-cluster-token=etcd-cluster-0 --initial-advertise-peer-urls=https://10.25.73.150:2380 --initial-cluster=SZD-L0101798=https://10.25.73.25:2380,SZD-L0103739=https://10.25.73.150:2380,SZD-L0097856=https://10.25.84.251:2380 --data-dir=/varlib/etcd snapshot restore mysnapshot.db
2018-08-16 19:58:21.892719 I | etcdserver/membership: added member 2a53eb67dfa37cc0 [https://10.25.84.251:2380] to cluster 4741a9e2cf17e1fa
2018-08-16 19:58:21.892796 I | etcdserver/membership: added member 304bcbfa92e84c75 [https://10.25.73.25:2380] to cluster 4741a9e2cf17e1fa
2018-08-16 19:58:21.892812 I | etcdserver/membership: added member c267a0ca02c6bff7 [https://10.25.73.150:2380] to cluster 4741a9e2cf17e1fa
[[email protected] etcd-cluster]#

5、啟動Etcd服務

  • 分別在etcd所在主機執行如下命令：
systemctl start etcd

6、驗證資料完整性

  • 經過驗證，使用ETCDCTL_API=2 存放的資料會丟失，使用ETCDCTL_API=3存放的資料能正常恢復

附錄：

  • 查詢etcd API3的鍵
[[email protected] ~]#  ETCDCTL_API=3 etcdctl --endpoints="https://10.25.84.251:2379,https://10.25.73.25:2379,https://10.25.73.150:2379" --cert=/root/etcd-cluster/etcd.pem --key=/root/etcd-cluster/etcd-key.pem --cacert=/root/etcd-cluster/ca.pem get / --prefix --keys-only
2018-08-16 20:38:06.954368 I | warning: ignoring ServerName for user-provided CA for backwards compatibility is deprecated
/name/1

/name/2

/name/3

/name/4

相關推薦

ETCD資料備份與恢復驗證

ETCD資料備份與恢復驗證 一、單機 說明：執行etcd備份資料的恢復的機器必須和原先etcd所在機器一致 1、單機備份 ETCDCTL_API=3 etcdctl --endpoints="https://10.25.72.62:2379" \ --cert=/etc/etcd/ss

Oracle的資料備份與恢復

備份解決方案: 1.物理備份:<1>冷備份(離線備份)                    <2>熱備份:使用者管理備份和Oracle管理部分 <1&g

mysql資料庫資料備份與恢復

1、通過物理拷貝備份與恢復          對MyISAM引擎的表來說：如果當前此表在拷貝過程中沒有任何寫操作時，可以直接拷貝，對單張表拷貝時只需把把表相關的三個以.frm,.MYD,.MYI結尾的檔案拷貝到另外的

2018.11.26檢視,觸發器.事物.儲存過程.函式.資料備份與恢復.流程控制

2018.11.26 一檢視 1什麼是檢視 檢視是有一張表或多張表的查詢結果構成的一張虛擬表,本質儲存一個 sql 語句在data檔案裡,當你呼叫它的時候就會執行這段sql語句.如果對檢視的記錄內容進行修改原本的資料記錄也會被修改,反之亦然.   2為什麼使用檢視   當我們

MySQL之終端下對資料的匯入匯出、賬戶管理、資料備份與恢復

資料匯入 將檔案系統中的內容匯入的資料庫中 語法格式: load data infile '檔名' into table 表名 fields terminated by "分隔符" lines terminated by '\n'; 倒數第二行是：在

mysql5.5-資料備份與恢復

一、mysqldump的工作原理 mysql資料庫自帶了一個很好用的備份命令，就是mysqldump。 它的基本使用如下： 語法：mysqldump -u 使用者名稱 -p 密碼 資料庫名 > 備份的檔名 利用mysqldump命令備份資料的過程，實際

MongoDB資料備份與恢復以及安全認證

與其他資料庫一樣，MongoDB提供了資料備份和恢復以及資料匯入匯出的功能，在MongoDB安裝目錄的bin目錄下有，有以下exe檔案，下面我們主要使用這些工具： 一、資料備份與恢復 資料的備份與恢復主要使用到mongodump.exe和mongorestor

Linux資料備份與恢復 dump、restore、dd命令

dump命令：備份分割槽、檔案或目錄 在Linux系統中 dump 命令是沒有安裝的，所以先安裝一下 dump 命令，安裝命令如下： [[email protected] ～]# yum -y install dump dump 命令可以支援 0～9 共 10 個備份級別。其中，0

mysql資料備份與恢復

#資料備份 或 恢復 #將classwork的資料備份到F盤 檔案命名為classwork.sql doc命令 #預設方式備份 mysqldump -uroot -proot function_cl

Redis的資料備份與恢復

Redis資料備份與恢復 持久化 1.RDB方式（預設） RDB方式的持久化是通過快照（snapshotting）完成的，當符合一定條件時Redis會自動將記憶體中的所有資料進行快照並存儲在硬碟上。進行快照的條件可以由使用者在配置檔案中自定義，由兩個引

Redis叢集進階-資料備份與恢復

備份： 使用save或者bgsave（後臺執行備份命令） 該命令將在 redis 安裝目錄中建立dump.rdb檔案。 恢復：   將備份檔案 (dump.rdb) 移動到 redis 安裝目錄並啟

HBase可用於管理、分析、修復和除錯的自帶工具hbck，hfile和資料備份與恢復介紹

HBase自帶的很多工具可用於管理、分析、修復和除錯，這些工具一部分的入口是hbase shell 客戶端，另一部分是在hbase的Jar包中。 目錄： hbck hfile 資料備份與恢復 Snapshots Replication Export C

InfluxDB 資料備份與恢復方式進行遷移

背景 由於公司有一套 Grafana + InfluxDB 的監控系統，但由於某種原因需要做服務相關的遷移工作，而原有的歷史監控資料希望也保留下來，所有就誕生了此篇，通過工作中實際的操作進行歸檔整理記

MongoDB資料備份與恢復

備份：mongodump     mongodump --help #命令幫助 mongodump  -h 192.168.0.1 -u "mydbuser" -p "123" -d mydb  -o d:\mydb #備份192.168.0.1上的mydb庫到本地的 d:\mydb 目錄，如果mong

mongodb 的資料備份與恢復

      ./bin/mongoexport -d test -c stu -f sn,name -q '{sn:{$lte:1000}}' --csv -o ./test.stu.csv【因為匯出的是csv 格式，所以是 csv 字尾命名】

我的Python成長之路--Day48--mysql高階(檢視、觸發器、事物、儲存過程、函式、流程控制、資料備份與恢復)

目錄 1、檢視 2、觸發器 3、事物 自定義函式 1、檢視 1.1、什麼是檢視 檢視是一張表或者多張表的查詢結果構成的一張虛擬表

大話儲存系列18——資料備份與恢復

備份一般會有檔案級的備份，還有塊級的備份兩種，我們接下來先簡要了解一下這兩種備份的區別。 檔案級備份：備份軟體只能感知到檔案這一層，將磁碟上的所有檔案，通過呼叫檔案系統的介面備份到另一個介質上，所以檔案級備份軟體，要麼依靠作業系統提供的API來備份，要麼本身具有檔案系統的功

MySQL 資料庫增量備份與恢復資料命令實戰

1. 備份單個數據庫練習 mysqldump 命令多種引數的使用 1.1 調整 MySQL 客戶端及服務端字符集為建庫建表時預設的 latin1，避免備份時的亂碼問題 [[email protected] ~]# vi /etc/my.cnf [[email protected] ~

Mysql----資料備份與資料恢復

資料備份（mysqldump，在linux終端操作） 1）命令格式：               mysqldump  -u使用者名稱  -p  源庫名  > 路徑[

ORACLE資料庫資料的備份與恢復

  原創作品，轉自請在文字開頭顯眼位置註明出處：https://www.cnblogs.com/sunshine5683/p/10052949.html 資料備份恢復在資料庫管理中至關重要，今天，總結一下資料庫備份與恢復需要注意的方面和實際操作！、 一、在備份之前首先應該執行commit語句，