![Kubernetes网络权威指南:基础、原理与实践](https://wfqqreader-1252317822.image.myqcloud.com/cover/281/27741281/b_27741281.jpg)
1.2 千呼万唤始出来:veth pair
介绍namespace时,我们多次提到veth pair。本节将详细介绍这对“孪生兄弟”。
部署过Docker或Kubernetes的读者肯定有这样的经历:在主机上输入ifconfig或ip addr命令查询网卡信息的时候,总会出来一大堆vethxxxx之类的网卡名,这些是Docker/Kubernetes为容器而创建的虚拟网卡。
veth是虚拟以太网卡(Virtual Ethernet)的缩写。veth设备总是成对的,因此我们称之为veth pair。veth pair一端发送的数据会在另外一端接收,非常像Linux的双向管道。根据这一特性,veth pair常被用于跨network namespace之间的通信,即分别将veth pair的两端放在不同的namespace里,如图1-2所示。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_29.jpg?sign=1738928212-LEr1zVZKyu16QBHm3is7eAVNuE4xuYFa-0-2d419757af1a30b5d273526f92cb59ef)
图1-2 veth pair示意图
前文已经提到,仅有veth pair设备,容器是无法访问外部网络的。为什么呢?因为从容器发出的数据包,实际上是直接进了veth pair设备的协议栈。如果容器需要访问网络,则需要使用网桥等技术将veth pair设备接收的数据包通过某种方式转发出去。
注:虽然我们在容器化的场景里经常看到veth网卡,但veth pair在传统的虚拟化技术(比如KVM等)中的应用也非常广泛。
下面,我们将演示veth pair的创建和使用:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_30.jpg?sign=1738928212-WdcGyO7Q3DUJHFXRHaObL3QAEg85mvuz-0-a17ff019aba7e542add2258d2b8746d3)
创建的veth pair在主机上表现为两块网卡,我们可以通过ip link命令查看:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_31.jpg?sign=1738928212-5ZWm8qsq1sY0rAUzRO3BSxUPwZPqizeB-0-5d283956a887fa9279cf6467db0012c7)
如上所示,新创建的veth pair设备的默认mtu是1500,设备初始状态是DOWN。我们同样可以使用ip link命令将这两块网卡的状态设置为UP。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_32.jpg?sign=1738928212-4JWlTk0ycJpNiZvfe1JC7LaXHO0uF7El-0-9eb7054b35b88f74802cce5c6af13975)
veth pair设备同样可以配置IP地址,命令如下:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_33.jpg?sign=1738928212-CLakm8UbQshIG2m38WuLicbPy7f7fQxP-0-dbbbe72ebbe27900f33f0ca69c8649e3)
可以将veth pair设备放到namespace中。让我们来温习命令的使用:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_34.jpg?sign=1738928212-4bpfKoLJmJtuP4ndNFd9N3ZfAWLDUtC7-0-16d36d9ce88257ba373ce2145a2a4360)
veth pair设备的原理较简单,就是向veth pair设备的一端输入数据,数据通过内核协议栈后从veth pair的另一端出来。veth pair的基本工作原理如图1-3所示。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_35.jpg?sign=1738928212-KPuWNYcywBCdkGIbIibER8JaXAb59Ptr-0-4cdd9b006fc850ec52d370f0290259ed)
图1-3 veth pair的基本工作原理图
1.2.1 veth pair内核实现
veth pair内核实现的源代码如下:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_37.jpg?sign=1738928212-hmYoQdHyqaxyWIF9LaSPqmFwRMQSTv0m-0-7858f2a86b8126d5aa3a7951519490d6)
上述代码块想表达的意思是:在veth pair设备上,任意一端(RX)接收的数据都会在另一端(TX)发送出去,veth pair在转发过程中不会篡改数据包的内容。
1.2.2 容器与host veth pair的关系
我们要学习的经典容器组网模型就是veth pair+bridge的模式。容器中的eth0实际上和外面host上的某个veth是成对的(pair)关系,那么,有没有办法知道host上的vethxxx和哪个container eth0是成对的关系呢?
方法1
首先,在目标容器里查看:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_38.jpg?sign=1738928212-e5PSDTdBAKmsiTWJaStKLLrVJpdlaawR-0-403828684d924ea35d397f9fec83dcf0)
然后,在主机上遍历/sys/claas/net下面的全部目录,查看子目录ifindex的值和容器里查出来的iflink值相当的veth名字,这样就找到了容器和主机的veth pair关系。例如,下面的例子中主机上veth63a89a3的ifindex刚好是5,意味着是目标容器veth pair的另一端。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_39.jpg?sign=1738928212-bgCXRfe3KjoE87eTZC8GACOOzeBrbDMR-0-600b795cac94aaa330d6e842b22aa488)
方法2
在目标容器里执行以下命令:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_40.jpg?sign=1738928212-Qf3ECRwBmZcNwB4YpyFfjqkR9xsGtmZz-0-ee759e997940b4319f284b0bd0415015)
从上面的命令输出可以看到116:eth0@if117,其中116是eth0接口的index,117是和它成对的veth的index。
当host执行下面的命令时,可以看到对应117的veth网卡是哪一个,这样就得到了容器和veth pair的关系。
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_41.jpg?sign=1738928212-ZS5rs67pWFPdlp1a86uBEKaRgYQwnaGf-0-77fd68ea49c944fce7a3dbf3a249bc84)
方法3
可以通过ethtool-S命令列出veth pair对端的网卡index,例如:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_42.jpg?sign=1738928212-WSyisCXikdK17wSz8dWcPYVM6z7HWXgJ-0-fdcaf2fc03f0831b1f21aa060dc6dfbd)
而主机上index为6的网卡为:
![](https://epubservercos.yuewen.com/D7598A/15937388804515906/epubprivate/OEBPS/Images/txt001_43.jpg?sign=1738928212-V5Ia6C5J4Mqoukcl5RdieQyYLH9uUTmc-0-e0f26e63fb0adf3f49f3477cab74f225)
1.2.3 小结
更多关于容器的介绍请参考后面的章节,这里仅仅是抛砖引玉,让读者对容器与veth pair的关系有个大概的了解。
那么,veth pair的实际用途是什么?1.3节将介绍Linux bridge,当Linux bridge和veth设备相结合时,就能组建一个最简单的容器网络。