kubernetes 已經成為容器編排領域的王者,它是基於容器的叢集編排引擎,具備擴充套件叢集、滾動升級回滾、彈性伸縮、自動治癒、服務發現等多種特效能力。

本文將帶著大家快速瞭解 kubernetes ,瞭解我們談論 kubernetes 都是在談論什麼。

kubernetes 架構

從巨集觀上來看 kubernetes 的整體架構,包括 Master、Node 以及 Etcd。

Master 即主節點,負責控制整個 kubernetes 叢集。它包括 Api Server、Scheduler、Controller 等組成部分。它們都需要和 Etcd 進行互動以儲存資料。

  • Api Server: 主要提供資源操作的統一入口,這樣就遮蔽了與 Etcd 的直接互動。功能包括安全、註冊與發現等。

  • Scheduler: 負責按照一定的排程規則將 Pod 排程到 Node 上。

  • Controller: 資源控制中心,確保資源處於預期的工作狀態。

Node 即工作節點,為整個叢集提供計算力,是容器真正執行的地方,包括執行容器、kubelet、kube-proxy。

  • kubelet: 主要工作包括管理容器的生命週期、結合 cAdvisor 進行監控、健康檢查以及定期上報節點狀態。

  • kube-proxy: 主要利用 service 提供叢集內部的服務發現和負載均衡,同時監聽 service/endpoints 變化並重新整理負載均衡。

從建立 deployment 開始

deployment 是用於編排 pod 的一種控制器資源,我們會在後面做介紹。這裡以 deployment 為例,來看看架構中的各元件在建立 deployment 資源的過程中都幹了什麼。

  1. 首先是 kubectl 發起一個建立 deployment 的請求
  2. apiserver 接收到建立 deployment 請求,將相關資源寫入 etcd;之後所有元件與 apiserver/etcd 的互動都是類似的
  3. deployment controller list/watch 資源變化併發起建立 replicaSet 請求
  4. replicaSet controller list/watch 資源變化併發起建立 pod 請求
  5. scheduler 檢測到未繫結的 pod 資源,通過一系列匹配以及過濾選擇合適的 node 進行繫結
  6. kubelet 發現自己 node 上需建立新 pod,負責 pod 的建立及後續生命週期管理
  7. kube-proxy 負責初始化 service 相關的資源,包括服務發現、負載均衡等網路規則

至此,經過 kubenetes 各元件的分工協調,完成了從建立一個 deployment 請求開始到具體各 pod 正常執行的全過程。

Pod

在 kubernetes 眾多的 api 資源中,pod 是最重要和基礎的,是最小的部署單元。

首先我們要考慮的問題是,我們為什麼需要 pod?pod 可以說是一種容器設計模式,它為那些"超親密"關係的容器而設計,我們可以想象 servelet 容器部署 war 包、日誌收集等場景,這些容器之間往往需要共享網路、共享儲存、共享配置,因此我們有了 pod 這個概念。

對於 pod 來說,不同 container 之間通過 infra container 的方式統一識別外部網路空間,而通過掛載同一份 volume 就自然可以共享儲存了,比如它對應宿主機上的一個目錄。

容器編排

容器編排是 kubernetes 的看家本領了,所以我們有必要了解一下。kubernetes 中有諸多編排相關的控制資源,例如編排無狀態應用的 deployment,編排有狀態應用的 statefulset,編排守護程序 daemonset 以及編排離線業務的 job/cronjob 等等。

我們還是以應用最廣泛的 deployment 為例。deployment、replicatset、pod 之間的關係是一種層層控制的關係。簡單來說,replicaset 控制 pod 的數量,而 deployment 控制 replicaset 的版本屬性。這種設計模式也為兩種最基本的編排動作實現了基礎,即數量控制的水平擴縮容、版本屬性控制的更新/回滾。

水平擴縮容

水平擴縮容非常好理解,我們只需修改 replicaset 控制的 pod 副本數量即可,比如從 2 改到 3,那麼就完成了水平擴容這個動作,反之即水平收縮。

更新/回滾

更新/回滾則體現了 replicaset 這個物件的存在必要性。例如我們需要應用 3 個例項的版本從 v1 改到 v2,那麼 v1 版本 replicaset 控制的 pod 副本數會逐漸從 3 變到 0,而 v2 版本 replicaset 控制的 pod 數會註解從 0 變到 3,當 deployment 下只存在 v2 版本的 replicaset 時變完成了更新。回滾的動作與之相反。

滾動更新

可以發現,在上述例子中,我們更新應用,pod 總是一個一個升級,並且最小有 2 個 pod 處於可用狀態,最多有 4 個 pod 提供服務。這種"滾動更新"的好處是顯而易見的,一旦新的版本有了 bug,那麼剩下的 2 個 pod 仍然能夠提供服務,同時方便快速回滾。

在實際應用中我們可以通過配置 RollingUpdateStrategy 來控制滾動更新策略,maxSurge 表示 deployment 控制器還可以建立多少個新 Pod;而 maxUnavailable 指的是,deployment 控制器可以刪除多少箇舊 Pod。

kubernetes 中的網路

我們瞭解了容器編排是怎麼完成的,那麼容器間的又是怎麼通訊的呢?

講到網路通訊,kubernetes 首先得有"三通"基礎:

  1. node 到 pod 之間可以通
  2. node 的 pod 之間可以通
  3. 不同 node 之間的 pod 可以通

簡單來說,不同 pod 之間通過 cni0/docker0 網橋實現了通訊,node 訪問 pod 也是通過 cni0/docker0 網橋通訊即可。而不同 node 之間的 pod 通訊有很多種實現方案,包括現在比較普遍的 flannel 的 vxlan/hostgw 模式等。flannel 通過 etcd 獲知其他 node 的網路資訊,並會為本 node 建立路由表,最終使得不同 node 間可以實現跨主機通訊。

微服務—service

在瞭解接下來的內容之前,我們得先了解一個很重要的資源物件:service。

我們為什麼需要 service 呢?在微服務中,pod 可以對應例項,那麼 service 對應的就是一個微服務。而在服務呼叫過程中,service 的出現解決了兩個問題:

  1. pod 的 ip 不是固定的,利用非固定 ip 進行網路呼叫不現實
  2. 服務呼叫需要對不同 pod 進行負載均衡

service 通過 label 選擇器選取合適的 pod,構建出一個 endpoints,即 pod 負載均衡列表。實際運用中,一般我們會為同一個微服務的 pod 例項都打上類似app=xxx的標籤,同時為該微服務建立一個標籤選擇器為app=xxx的 service。

kubernetes 中的服務發現與網路呼叫

在有了上述"三通"的網路基礎後,我們可以開始微服務架構中的網路呼叫在 kubernetes 中是怎麼實現的了。

這部分內容其實在說說 Kubernetes 是怎麼實現服務發現的已經講得比較清楚了,比較細節的地方可以參考上述文章,這裡做一個簡單的介紹。

服務間呼叫

首先是東西向的流量呼叫,即服務間呼叫。這部分主要包括兩種呼叫方式,即 clusterIp 模式以及 dns 模式。

clusterIp 是 service 的一種型別,在這種型別模式下,kube-proxy 通過 iptables/ipvs 為 service 實現了一種 VIP(虛擬 ip)的形式。只需要訪問該 VIP,即可負載均衡地訪問到 service 背後的 pod。

上圖是 clusterIp 的一種實現方式,此外還包括 userSpace 代理模式(基本不用),以及 ipvs 模式(效能更好)。

dns 模式很好理解,對 clusterIp 模式的 service 來說,它有一個 A 記錄是 service-name.namespace-name.svc.cluster.local,指向 clusterIp 地址。所以一般使用過程中,我們直接呼叫 service-name 即可。

服務外訪問

南北向的流量,即外部請求訪問 kubernetes 叢集,主要包括三種方式:nodePort、loadbalancer、ingress。

nodePort 同樣是 service 的一種型別,通過 iptables 賦予了呼叫宿主機上的特定 port 就能訪問到背後 service 的能力。

loadbalancer 則是另一種 service 型別,通過公有云提供的負載均衡器實現。

我們訪問 100 個服務可能需要建立 100 個 nodePort/loadbalancer。我們希望通過一個統一的外部接入層訪問內部 kubernetes 叢集,這就是 ingress 的功能。ingress 提供了統一接入層,通過路由規則的不同匹配到後端不同的 service 上。ingress 可以看做是"service 的 service"。ingress 在實現上往往結合 nodePort 以及 loadbalancer 完成功能。

到現在為止,我們簡單瞭解了 kubernetes 的相關概念,它大致是怎麼運作的,以及微服務是怎麼執行在 kubernetes 中的。於是當我們聽到別人討論 kubernetes 時,我們可以知道他們在討論什麼。

轉自https://fredal.xin/what-is-kubernetes