詳解Kubernetes 中容器跨主機網(wǎng)絡

更新時間：2023年04月13日 15:42:16 作者：路由器沒有路

這篇文章主要為大家介紹了Kubernetes中容器跨主機網(wǎng)絡是怎么樣的，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步，早日升職加薪

前言

在云原生領域，Kubernetes 已經(jīng)成為了最主流的容器管理工具。Kubernetes 支持將容器部署到多個節(jié)點（即主機）上，因此必須解決容器間跨主機通信的問題。

本文將詳細介紹 Kubernetes 中容器跨主機網(wǎng)絡的實現(xiàn)原理和方法。

什么是 Flannel

在 Kubernetes 中，F(xiàn)lannel 是一個開源的容器網(wǎng)絡解決方案。它負責在 Kubernetes 集群中創(chuàng)建一個虛擬網(wǎng)絡，使得不同節(jié)點上的 Pod 可以使用相同的 IP 地址進行通信。

Flannel 旨在提供簡單、快速、可靠的容器網(wǎng)絡。

Flannel 通過分配每個節(jié)點一個唯一的子網(wǎng)，然后讓節(jié)點之間的 Pod 通過這些子網(wǎng)進行通信來實現(xiàn)網(wǎng)絡隔離。Flannel 支持多種后端，包括 UDP、VXLAN 和 Host-gw 等。

Flannel 的后端實現(xiàn)有哪些

Flannel 的后端實現(xiàn)主要包括以下幾種方式：

VXLAN；
host-gw；
UDP。

這三種不同的后端實現(xiàn)，代表了三種容器跨主網(wǎng)絡的主流實現(xiàn)方法。

在這三種模式中，UDP 模式可以說是 Flannel 項目早支持的一種方式，但也是性能最差的一種方式。

所以，目前為止這個模式用的比較少。不過，F(xiàn)lannel 之所以最先選擇 UDP 模式，還是有它的道理的，因為這種模式是最直接、也是最容易理解的容器跨主網(wǎng)絡實現(xiàn)。

UDP

UDP 是 Flannel 默認的后端實現(xiàn)方式。它使用 UDP 協(xié)議創(chuàng)建一組 overlay 網(wǎng)絡，連接 Kubernetes 集群中的所有節(jié)點。每個節(jié)點都會獲取一個子網(wǎng)，并將其中的 IP 地址分配給其上運行的 Pod。

當 Pod 需要與其他節(jié)點上的 Pod 通信時，它會將數(shù)據(jù)包封裝在 UDP 包中，通過 overlay 網(wǎng)絡發(fā)送到目標節(jié)點，并在那里解包。由于 UDP 的輕量級和簡單性，它是 Flannel 最常用的后端實現(xiàn)方式。

VXLAN

VXLAN 是一種虛擬化隧道協(xié)議，它可以在不同子網(wǎng)之間傳遞以太網(wǎng)流量。Flannel 使用 VXLAN 創(chuàng)建 overlay 網(wǎng)絡，每個節(jié)點都會獲取一個唯一的 VTEP（VXLAN Tunnel Endpoint），并將其中的 IP 地址分配給其上運行的 Pod。

與 UDP 相比，VXLAN 需要較多的計算資源，但它提供了更好的可靠性和靈活性。

Host-gw

Host-gw 是一種“主機網(wǎng)關”模式，它將每個節(jié)點都視為一個網(wǎng)關，將所有 Pod 的流量直接路由到目標節(jié)點上的 Pod 所在的子網(wǎng)。

這種方式非常簡單，因為它不需要任何 overlay 網(wǎng)絡和封裝解封裝的過程。但是，它需要將所有節(jié)點上的路由表配置正確，也需要在集群中動態(tài)改變路由表來保證容器間的通信。

基于 Flannel UDP 模式的實現(xiàn)跨主通信

在 Flannel 的 UDP 模式下，每個節(jié)點都會獲取一個唯一的子網(wǎng)，并將其中的 IP 地址分配給其上運行的 Pod。當 Pod 需要與其他節(jié)點上的 Pod 通信時，它會將數(shù)據(jù)包封裝在 UDP 包中，通過 overlay 網(wǎng)絡發(fā)送到目標節(jié)點，并在那里解包。

具體來說，F(xiàn)lannel 最初在集群中的每個節(jié)點上啟動一個 flanneld 服務。flanneld 服務會協(xié)調(diào)所有節(jié)點之間的 overlay 網(wǎng)絡，并為每個節(jié)點分配一個唯一的子網(wǎng)。

然后，在每個節(jié)點上運行的 kubelet 服務會在容器啟動時將該子網(wǎng)的 IP 地址分配給容器。容器內(nèi)的應用程序可以使用該 IP 地址來訪問集群中的其他容器。

UDP 模式案例實現(xiàn)

假設有一個 Kubernetes 集群，有兩個節(jié)點，每個節(jié)點都有一個容器正在運行。容器名稱為“web1”和“web2”，它們都運行在不同的節(jié)點上。現(xiàn)在，我們要讓這兩個容器之間進行跨主機通信。

首先，我們需要確保每個節(jié)點上都已經(jīng)安裝了 Flannel 并成功啟動了 flanneld 服務。然后，在每個節(jié)點上運行以下命令來檢查 Flannel 是否正常工作：

$ sudo systemctl status flanneld

接下來，我們需要為每個節(jié)點分配一個唯一的子網(wǎng)。假設我們將第一個節(jié)點的子網(wǎng)設置為 10.244.0.0/24，第二個節(jié)點的子網(wǎng)設置為 10.244.1.0/24。在每個節(jié)點上運行以下命令來配置 Flannel 并分配子網(wǎng)：

$ sudo vim /etc/sysconfig/flanneld
FLANNEL_ETCD="http://etcd-ip:2379"
FLANNEL_ETCD_PREFIX="/kube-centos/network"
FLANNEL_OPTIONS="-iface=eth0"
$ sudo systemctl restart flanneld

其中，etcd-ip 是 etcd 服務器的 IP 地址。注意，所有節(jié)點的 FLANNEL_ETCD_PREFIX 值必須相同，以便它們能夠從 etcd 中獲取相同的子網(wǎng)信息。

現(xiàn)在，我們可以在容器內(nèi)使用指定的 IP 地址進行通信了。例如，在 web1 容器內(nèi)運行以下命令來向 web2 容器發(fā)送 ping 包：

$ ping 10.244.1.2

其中，10.244.1.2 是 web2 容器的 IP 地址。

通過 Flannel UDP 模式，我們可以輕松地實現(xiàn)跨主機通信，使得基于 Kubernetes 的應用程序能夠更加穩(wěn)定和可靠地運行。

基于 Flannel UDP 模式的跨主通信的基本原理如下：

基于 Flannel VXLAN 模式的跨主通信

在 Flannel 的 VXLAN 模式下，每個節(jié)點都會獲取一個唯一的 VTEP，它可以將容器的數(shù)據(jù)包封裝在 VXLAN 包中，在 overlay 網(wǎng)絡中傳輸。與 UDP 模式不同，VXLAN 模式需要使用 VXLAN 協(xié)議來進行封裝和解封裝。

具體來說，F(xiàn)lannel VNI（VXLAN Network Identifier）將被分配給 overlay 網(wǎng)絡，并且每個節(jié)點都必須為該網(wǎng)絡配置一個 VTEP（VXLAN Tunnel Endpoint）。

此外，每個 Pod 都將獲得該網(wǎng)絡中的一個唯一 IP 地址，并將其用于與其他 Pod 進行通信。

VXLAN 模式案例實現(xiàn)

假設有一個 Kubernetes 集群，有兩個節(jié)點，每個節(jié)點都有一個容器正在運行。容器名稱為“web1”和“web2”，它們都運行在不同的節(jié)點上?，F(xiàn)在，我們要讓這兩個容器之間進行跨主機通信。

首先，我們需要確保每個節(jié)點上已經(jīng)安裝了 Flannel 并成功啟動了 flanneld 服務。然后，在每個節(jié)點上運行以下命令來檢查 Flannel 是否正常工作：

$ sudo systemctl status flanneld

接下來，我們需要為每個節(jié)點分配一個唯一的 VTEP。假設我們將 VXLAN 網(wǎng)絡 ID 設置為 1，第一個節(jié)點的 VTEP IP 地址為 192.168.0.1，第二個節(jié)點的 VTEP IP 地址為 192.168.0.2。在每個節(jié)點上運行以下命令來配置 Flannel 并分配 VTEP：

$ sudo vim /etc/sysconfig/flanneld
FLANNEL_ETCD="http://etcd-ip:2379"
FLANNEL_ETCD_PREFIX="/kube-centos/network"
FLANNEL_OPTIONS="-iface=eth0 -vni=1"
$ sudo ifconfig flannel.1 192.168.0.1/24 up
$ sudo systemctl restart flanneld

然后，在每個容器中都可以進行跨主機通信。例如，在 web1 容器內(nèi)運行以下命令來向 web2 容器發(fā)送 ping 包：