Flannel 是由 CoreOS 維護的一個虛擬網路方案。目前是kubernetes預設的網路，它有golang編寫，在原始碼分析之前還是先看看怎樣使用。這裡不得不提一下kubernetes網路約束：
1. 所有容器之間都可以無須SNAT即可相互直接以IP通訊。
2. 所有主機與容器之間都可以無須SNAT即可相互直接以IP通訊。
3. 容器看到的自身IP與其他容器看到的容器IP相同。
當然flannel的網路是符合這三點約束的。
在部署完kubernetes之後，那麼kubernetes可以啟動容器了，但此時容器跨宿主機網路是無法聯通，需要一些技術如vxlan、埠對映、SDN等。下面就開始flannel網路部署安裝。
flannel的安裝可謂簡單至極

yum -y install flannel

配置也是極其簡單，配置檔案/etc/sysconfig/flanneld ，主要配置etcd的地址

# Flanneld configuration options  

# etcd url location.  Point this to the server where etcd runs
FLANNEL_ETCD_ENDPOINTS="http://10.39.0.6:2379"

# etcd config key.  This is the configuration key that flannel queries
# For address range assignment
 

FLANNEL_ETCD_PREFIX="/flannel/network"

# Any additional options that you want to pass
FLANNEL_OPTIONS="-iface=eth0"

flannel是依賴etcd做網路分配以及埠資訊獲取的，所以還需要etcd的支援，下面是我本地環境的設定：

etcdctl get /flannel/network/config
{"Network": "192.168.0.0/16","SubnetLen": 24,"SubnetMin": "192.168.1.0","SubnetMax": "192.168.100.0","Backend"
 
: {"Type": "vxlan"}}

這樣設定了192.168.0.0/16這樣一個網段作為容器的IP。每個子網掩碼24。後面設定了最小和最大子網，最後一個是設定backend網路型別包括UDP、vxlan、host-gw等。下面就可以通過systemctl管理flannel的程序flanneld了。

systemctl status flanneld
● flanneld.service - Flanneld overlay address etcd agent
   Loaded: loaded (/usr/lib/systemd/system/flanneld.service; enabled; vendor preset: disabled)
   Active: active (running) since 一 2017-04-24 13:15:51 CST; 37min ago
  Process: 14513 ExecStartPost=/usr/libexec/flannel/mk-docker-opts.sh -k DOCKER_NETWORK_OPTIONS -d /run/flannel/docker (code=exited, status=0/SUCCESS)
 Main PID: 14506 (flanneld)
   Memory: 3.8M
   CGroup: /system.slice/flanneld.service
           └─14506 /usr/bin/flanneld -etcd-endpoints=http://10.39.0.6:2379 -etcd-prefix=/flannel/network -iface=eth0

4月 24 13:15:50 slave3 systemd[1]: Starting Flanneld overlay address etcd agent...
4月 24 13:15:50 slave3 flanneld-start[14506]: I0424 13:15:50.966112   14506 main.go:132] Installing signal handlers
4月 24 13:15:50 slave3 flanneld-start[14506]: I0424 13:15:50.967099   14506 manager.go:149] Using interface with name eth0 and address 10.39.0.53
4月 24 13:15:50 slave3 flanneld-start[14506]: I0424 13:15:50.967417   14506 manager.go:166] Defaulting external address to interface address (10.39.0.53)
4月 24 13:15:51 slave3 flanneld-start[14506]: I0424 13:15:51.001224   14506 local_manager.go:179] Picking subnet in range 192.168.1.0 ... 192.168.100.0
4月 24 13:15:51 slave3 flanneld-start[14506]: I0424 13:15:51.007527   14506 manager.go:250] Lease acquired: 192.168.69.0/24
4月 24 13:15:51 slave3 flanneld-start[14506]: I0424 13:15:51.009495   14506 network.go:58] Watching for L3 misses
4月 24 13:15:51 slave3 flanneld-start[14506]: I0424 13:15:51.009875   14506 network.go:66] Watching for new subnet leases
4月 24 13:15:51 slave3 systemd[1]: Started Flanneld overlay address etcd agent.

我之所以把整個systemctl輸出貼出來，是想和大家介紹一下flanneld的啟動過程從日誌可以看出，第一步是signal handlers這個是安裝一個監聽核心訊號量的handler，第二步是使用eth0為自己流量出口，第三步是獲取我之前config設定的子網範圍，第四步是租用一個網段，第五步是啟動L3 Miss監聽，第六步是監聽子網事件。那麼這個flannel就啟動了。
測試一下效果：

ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
19: [email protected]: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1450 qdisc noqueue state UP group default 
    link/ether 02:42:c0:a8:05:02 brd ff:ff:ff:ff:ff:ff
    inet 192.168.5.2/24 scope global eth0
       valid_lft forever preferred_lft forever
    inet6 fe80::42:c0ff:fea8:502/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever

ping 192.168.90.7
PING 192.168.90.7 (192.168.90.7): 56 data bytes
64 bytes from 192.168.90.7: icmp_seq=0 ttl=62 time=8.250 ms
64 bytes from 192.168.90.7: icmp_seq=1 ttl=62 time=12.359 ms
64 bytes from 192.168.90.7: icmp_seq=2 ttl=62 time=8.293 ms

ping另一個主機上面的容器ok！
這裡大家可能有疑惑，我這個flannel沒有cni的部分，那麼它是怎樣接入的k8s裡面的呢？其實flannel有個cni，只是不常用，在這裡面偷了個懶，直接修改docker的bip達到網路分配的目的。

cat /usr/lib/systemd/system/docker.service.d/flannel.conf
[Service]
EnvironmentFile=-/run/flannel/docker


cat /run/flannel/docker 
DOCKER_OPT_BIP="--bip=192.168.69.1/24"
DOCKER_OPT_IPMASQ="--ip-masq=true"
DOCKER_OPT_MTU="--mtu=1450"
DOCKER_NETWORK_OPTIONS=" --bip=192.168.69.1/24 --ip-masq=true --mtu=1450"

通過修改docker啟動引數修改docker的bip，如下：

ps -ef|grep docker

root     15239     1  0 13:17 ?        00:00:08 /usr/bin/dockerd-current --add-runtime docker-runc=/usr/libexec/docker/docker-runc-current --default-runtime=docker-runc --exec-opt native.cgroupdriver=systemd --userland-proxy-path=/usr/libexec/docker/docker-proxy-current --selinux-enabled --log-driver=journald --signature-verification=false --bip=192.168.69.1/24 --ip-masq=true --mtu=1450

那麼啟動的容器還是掛到docker自己網橋上面，只不過網橋的地址段被flannel設定了，flannel為每個宿主機分配了一個網段。所以這裡有坑需要注意，就是flannel如果修改了網段配置，需要重啟docker才能生效。關於flannel的基本安裝使用就說到這裡