![Kubernetes网络权威指南:基础、原理与实践](https://wfqqreader-1252317822.image.myqcloud.com/cover/281/27741281/b_27741281.jpg)
1.2 千呼万唤始出来:veth pair
介绍namespace时,我们多次提到veth pair。本节将详细介绍这对“孪生兄弟”。
部署过Docker或Kubernetes的读者肯定有这样的经历:在主机上输入ifconfig或ip addr命令查询网卡信息的时候,总会出来一大堆vethxxxx之类的网卡名,这些是Docker/Kubernetes为容器而创建的虚拟网卡。
veth是虚拟以太网卡(Virtual Ethernet)的缩写。veth设备总是成对的,因此我们称之为veth pair。veth pair一端发送的数据会在另外一端接收,非常像Linux的双向管道。根据这一特性,veth pair常被用于跨network namespace之间的通信,即分别将veth pair的两端放在不同的namespace里,如图1-2所示。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_29.jpg?sign=1739675215-Azz5Al0xacpfInscgs2S2SGjQUuRO99b-0-f1f4073e86b4f6c847514486f86c810f)
图1-2 veth pair示意图
前文已经提到,仅有veth pair设备,容器是无法访问外部网络的。为什么呢?因为从容器发出的数据包,实际上是直接进了veth pair设备的协议栈。如果容器需要访问网络,则需要使用网桥等技术将veth pair设备接收的数据包通过某种方式转发出去。
注:虽然我们在容器化的场景里经常看到veth网卡,但veth pair在传统的虚拟化技术(比如KVM等)中的应用也非常广泛。
下面,我们将演示veth pair的创建和使用:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_30.jpg?sign=1739675215-cLly8RZhQHNOAlu3ImdYFjoX9NlyD45l-0-21e7811f2ad9ce3b234c177cf35a58a8)
创建的veth pair在主机上表现为两块网卡,我们可以通过ip link命令查看:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_31.jpg?sign=1739675215-ZkfbXN6IqTX9DrWl6TLNUy4S1wifja6b-0-c5d204e6d3bca62896b5762b34cbe4f4)
如上所示,新创建的veth pair设备的默认mtu是1500,设备初始状态是DOWN。我们同样可以使用ip link命令将这两块网卡的状态设置为UP。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_32.jpg?sign=1739675215-yq72XNDsbhlgduhP4pkr62wvgn8bPiTK-0-306ebf8378ef3086c403636558ba4c7e)
veth pair设备同样可以配置IP地址,命令如下:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_33.jpg?sign=1739675215-zJC2jayP5EoVuotaCZq4ammMPVjpIPho-0-b16af4e1963d76d4335efe3c68886b19)
可以将veth pair设备放到namespace中。让我们来温习命令的使用:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_34.jpg?sign=1739675215-uqJtuImUhP22fA1cv3ZpmF9XCnvwj7YE-0-24c67718b0a4d3c5eb096e0024a7ad61)
veth pair设备的原理较简单,就是向veth pair设备的一端输入数据,数据通过内核协议栈后从veth pair的另一端出来。veth pair的基本工作原理如图1-3所示。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_35.jpg?sign=1739675215-Tv2nT7fE0TwmeQLFr3nmHb3R7zo5aKUt-0-9541dc888b82b8dcc5ec6e0f219581c5)
图1-3 veth pair的基本工作原理图
1.2.1 veth pair内核实现
veth pair内核实现的源代码如下:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_37.jpg?sign=1739675215-3fUIPZlQZin6CBe0bN0ggehh16oB3DtP-0-b8493ffef28acc657f257a26ad3379fd)
上述代码块想表达的意思是:在veth pair设备上,任意一端(RX)接收的数据都会在另一端(TX)发送出去,veth pair在转发过程中不会篡改数据包的内容。
1.2.2 容器与host veth pair的关系
我们要学习的经典容器组网模型就是veth pair+bridge的模式。容器中的eth0实际上和外面host上的某个veth是成对的(pair)关系,那么,有没有办法知道host上的vethxxx和哪个container eth0是成对的关系呢?
方法1
首先,在目标容器里查看:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_38.jpg?sign=1739675215-rfsPW8gt7nkAqeiwy1V653RWY5mBcF0z-0-00de4d38f7568028fab6a33c71b0aba5)
然后,在主机上遍历/sys/claas/net下面的全部目录,查看子目录ifindex的值和容器里查出来的iflink值相当的veth名字,这样就找到了容器和主机的veth pair关系。例如,下面的例子中主机上veth63a89a3的ifindex刚好是5,意味着是目标容器veth pair的另一端。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_39.jpg?sign=1739675215-dmespIvOHv2YqWtMxb9jCDxeWauT2VFV-0-c342bfb960d7b066db8c65dcec9634c2)
方法2
在目标容器里执行以下命令:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_40.jpg?sign=1739675215-k6sB3ZvUDuODTZPcm8UXtNUD60hjgaLc-0-3a0bf16e5ffb938398c337162b2d169b)
从上面的命令输出可以看到116:eth0@if117,其中116是eth0接口的index,117是和它成对的veth的index。
当host执行下面的命令时,可以看到对应117的veth网卡是哪一个,这样就得到了容器和veth pair的关系。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_41.jpg?sign=1739675215-phXPCvPrvew2MQS9qRGSrDMSX6PonLT4-0-ea45fdda66e12a3073f5cd4a968c5335)
方法3
可以通过ethtool-S命令列出veth pair对端的网卡index,例如:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_42.jpg?sign=1739675215-Lr0DTepWtFqzjbdafQMIgtew6Ob51kio-0-befee4068a11dbc047944acc07f9513e)
而主机上index为6的网卡为:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_43.jpg?sign=1739675215-1rhLA4ua2wQlFTXEzdvDLTFGHqKTAzan-0-b2cfdd312339953ff42ad5f4025fbc56)
1.2.3 小结
更多关于容器的介绍请参考后面的章节,这里仅仅是抛砖引玉,让读者对容器与veth pair的关系有个大概的了解。
那么,veth pair的实际用途是什么?1.3节将介绍Linux bridge,当Linux bridge和veth设备相结合时,就能组建一个最简单的容器网络。