資訊專欄INFORMATION COLUMN
摘要：每個(gè)都是從一個(gè)更大的池中劃分的，會(huì)在每個(gè)主機(jī)上運(yùn)行一個(gè)叫的，職責(zé)是從池中分配。為了在各個(gè)主機(jī)間共享信息，用存放網(wǎng)絡(luò)配置已分配的的等信息。同一主機(jī)的容器通過(guò)連接，跨主機(jī)流量通過(guò)轉(zhuǎn)發(fā)。
主要參考每天5分鐘玩轉(zhuǎn)docker容器技術(shù)博客。 記錄下自己的實(shí)驗(yàn)過(guò)程。 如果想學(xué)習(xí)，請(qǐng)直接參考該博客http://www.cnblogs.com/CloudMan6/網(wǎng)絡(luò)概述
flannel為每個(gè)host分配一個(gè)subnet，容器從此subnet中分配ip。這些ip可以在host間路由，容器間無(wú)需nat和port mapping就可以跨主機(jī)通信。
每個(gè)subnet都是從一個(gè)更大的ip池中劃分的，flannel會(huì)在每個(gè)主機(jī)上運(yùn)行一個(gè)叫flanneld的agent，職責(zé)是從池中分配subnet。為了在各個(gè)主機(jī)間共享信息，flannel用etcd存放網(wǎng)絡(luò)配置、已分配的subnet、host的ip等信息。
數(shù)據(jù)包如何在主機(jī)間轉(zhuǎn)發(fā)是由 backend 實(shí)現(xiàn)的。flannel 提供了多種 backend，最常用的有 vxlan 和 host-gw
環(huán)境搭建 安裝配置etcd在192.168.19.120上運(yùn)行如下腳本：
ETCD_VER=v2.3.7
DOWNLOAD_URL=https://github.com/coreos/etcd/releases/download
curl -L ${DOWNLOAD_URL}/${ETCD_VER}/etcd-${ETCD_VER}-linux-amd64.tar.gz -o /tmp/etcd-${ETCD_VER}-linux-amd64.tar.gz
mkdir -p /tmp/test-etcd && tar xzvf /tmp/etcd-${ETCD_VER}-linux-amd64.tar.gz -C /tmp/test-etcd --strip-components=1
cp /tmp/test-etcd/etcd* /usr/local/bin/
運(yùn)行etcd
etcd -listen-client-urls http://192.168.19.120:2379 -advertise-client-urls http://192.168.19.120:2379build flannel
下載并重命名 image。
docker pull cloudman6/kube-cross:v1.6.2-2
docker tag cloudman6/kube-cross:v1.6.2-2 gcr.io/google_containers/kube-cross:v1.6.2-2
下載 flannel 源碼。
git clone https://github.com/coreos/fla...
開(kāi)始構(gòu)建。
cd flannel
make dist/flanneld-amd64
將flannel執(zhí)行文件拷貝到host2 和host3
scp dist/flanneld-amd64 192.168.19.121:/usr/local/bin/flanneld
scp dist/flanneld-amd64 192.168.19.122:/usr/local/bin/flanneld
配置文件如下：
{
"Network":"10.2.0.0/16",
"SubnetLen":24,
"Backend":{
"Type":"vxlan"
}
}
解釋：
Network 定義該網(wǎng)絡(luò)的ip池
SubnetLen 指定每個(gè)主機(jī)分配到的subnet大小為24位，即 10.2.x.0/24
Backend為vxlan，即主機(jī)間通過(guò)vxlan通信。
將配置存入etcd
etcdctl --endpoint=192.168.19.120:2379 set /docker-test/network/config < flannel_config.json啟動(dòng)flannel 啟動(dòng)命令
在兩臺(tái)機(jī)器上運(yùn)行如下命令：
flanneld -etcd-endpoints=http://192.168.19.120:2379 -iface=enp0s3 -etcd-prefix=/docker-test/network
-etcd-endpoints 指定 etcd url
-iface 指定主機(jī)間數(shù)據(jù)傳輸使用的interface
-etcd-prefix 指定etcd存放flannel網(wǎng)絡(luò)配置文件的key
輸出如下：
root@host3:~# flanneld -etcd-endpoints=http://192.168.19.120:2379 -iface=enp0s3 -etcd-prefix=/docker-test/network I0520 02:24:57.594377 2463 main.go:499] Using interface with name enp0s3 and address 192.168.19.122 I0520 02:24:57.594766 2463 main.go:516] Defaulting external address to interface address (192.168.19.122) I0520 02:24:57.595348 2463 main.go:240] Created subnet manager: Etcd Local Manager with Previous Subnet: None I0520 02:24:57.595643 2463 main.go:243] Installing signal handlers I0520 02:24:57.598847 2463 main.go:358] Found network config - Backend type: vxlan I0520 02:24:57.599288 2463 vxlan.go:120] VXLAN config: VNI=1 Port=0 GBP=false DirectRouting=false I0520 02:24:57.649392 2463 local_manager.go:234] Picking subnet in range 10.2.1.0 ... 10.2.255.0 I0520 02:24:57.651626 2463 local_manager.go:220] Allocated lease (10.2.99.0/24) to current node (192.168.19.122) I0520 02:24:57.653626 2463 main.go:305] Wrote subnet file to /run/flannel/subnet.env I0520 02:24:57.654905 2463 main.go:309] Running backend. I0520 02:24:57.660772 2463 vxlan_network.go:60] watching for new subnet leases I0520 02:24:57.665879 2463 main.go:401] Waiting for 23h0m0.025221044s to renew lease I0520 02:24:57.672707 2463 iptables.go:115] Some iptables rules are missing; deleting and recreating rules I0520 02:24:57.674333 2463 iptables.go:137] Deleting iptables rule: -s 10.2.0.0/16 -j ACCEPT I0520 02:24:57.678549 2463 iptables.go:137] Deleting iptables rule: -d 10.2.0.0/16 -j ACCEPT I0520 02:24:57.688935 2463 iptables.go:125] Adding iptables rule: -s 10.2.0.0/16 -j ACCEPT I0520 02:24:57.696815 2463 iptables.go:125] Adding iptables rule: -d 10.2.0.0/16 -j ACCEPT啟動(dòng)后的效果
新建了一個(gè)interface flannel.1， 且配置上subnet的第一個(gè)ip 10.2.21.0
