网络节点

Vlan 模式下的网络节点

类似GRE模式下，br-eth1收到到达的网包，int-br-eth1和phy-br-eth1上分别进行vlan转换，保证到达br-int上的网包都是带有内部vlan tag，到达br-eth1上的都是带有外部vlan tag。br-ex则完成到OpenStack以外网络的连接。
查看网桥信息，包括三个网桥，br-eth1、br-int和br-ex。

  1. #ovs
  2. 3bd78da8-d3b5-4112-a766-79506a7e2801
  3.     Bridge br-ex
  4.         Port "qg-VVV"
  5.             Interface "qg-VVV"
  6.                 type: internal
  7.         Port br-ex
  8.             Interface br-ex
  9.                 type: internal
  10.         Port "eth0"
  11.             Interface "eth0"
  12.     Bridge br-int
  13.         Port br-int
  14.             Interface br-int
  15.                 type: internal
  16.         Port "int-br-eth1"
  17.             Interface "int-br-eth0"
  18.         Port "tapXXX"
  19.             tag: 1
  20.             Interface "tapXXX"
  21.                 type: internal
  22. Port "tapWWW"
  23.             tag: 2
  24.             Interface "tapWWW"
  25.                 type: internal
  26.         Port "qr-YYY"
  27.             tag: 1
  28.             Interface "qr-YYY"
  29.                 type: internal
  30.         Port "qr-ZZZ"
  31.             tag: 2
  32.             Interface "qr-ZZZ"
  33.                 type: internal
  34.     Bridge "br-eth1"
  35.         Port "phy-br-eth1"
  36.             Interface "phy-br-eth1"
  37.         Port "br-eth1"
  38.             Interface "br-eth1"
  39.                 type: internal
  40.         Port "eth1"
  41.             Interface "eth1"

br-eth1

br-eth1主要负责把物理网络上外部vlan转化为local vlan。

  1. #ovs-ofctl dump-flows br-eth1
  2. NXST_FLOW reply (xid=0x4):
  3.  cookie=0x0, duration=144.33s, table=0, n_packets=13, n_bytes=28404, idle_age=24, hard_age=65534, priority=4,in_port=5,dl_vlan=101 actions=mod_vlan_vid:1,NORMAL
  4.  cookie=0x0, duration=144.33s, table=0, n_packets=13, n_bytes=28404, idle_age=24, hard_age=65534, priority=4,in_port=5,dl_vlan=102 actions=mod_vlan_vid:2,NORMAL
  5.  cookie=0x0, duration=608.373s, table=0, n_packets=23, n_bytes=1706, idle_age=65534, hard_age=65534, priority=2,in_port=5 actions=drop
  6.  cookie=0x0, duration=675.373s, table=0, n_packets=58, n_bytes=10625, idle_age=24, hard_age=65534, priority=1 actions=NORMAL

br-int

br-int上挂载了大量的agent来提供各种网络服务，另外负责对发往br-eth1的流量，实现local vlan转化为外部vlan。

  1. #ovs-ofctl dump-flows br-int
  2. NXST_FLOW reply (xid=0x4):
  3.  cookie=0x0, duration=147294.121s, table=0, n_packets=224, n_bytes=33961, idle_age=13, hard_age=65534, priority=3,in_port=4,dl_vlan=1 actions=mod_vlan_vid:101,NORMAL
  4.  cookie=0x0, duration=603538.84s, table=0, n_packets=19, n_bytes=2234, idle_age=18963, hard_age=65534, priority=2,in_port=4 actions=drop
  5.  cookie=0x0, duration=603547.134s, table=0, n_packets=31901, n_bytes=6419756, idle_age=13, hard_age=65534, priority=1 actions=NORMAL

dnsmasq负责提供DHCP服务，绑定到某个特定的名字空间上，每个需要DHCP服务的租户网络有自己专属隔离的DHCP服务（图中的tapXXX和tapWWW上各自监听了一个dnsmasq）。

路由是L3 agent来实现，每个子网在br-int上有一个端口（qr-YYY和qr-ZZZ，已配置IP，分别是各自内部子网的网关），L3 agent绑定到上面。要访问外部的公共网络，需要通过L3 agent发出，而不是经过int-br-ex到phy-br-ex（实际上并没有网包从这个veth pair传输）。如果要使用外部可见的floating IP，L3 agent仍然需要通过iptables来进行NAT。

每个L3 agent或dnsmasq都在各自独立的名字空间中，如下图所示，其中同一租户的两个子网都使用了同一个路由器。

每个网络功能进程都在自己的名字空间中

对于子网使用不同路由器的情况，多个路由器会在自己独立的名字空间中。例如要实现两个租户的两个子网的情况，如下图所示。

两个租户的两个子网的结构

这种情况下，网络节点上的名字空间如下图所示。
两个租户两个子网情况下的名字空间

br-ex

br-ex要做的事情很简单，只需要正常转发即可。

  1. #ovs-ofctl dump-flows br-ex
  2. NXST_FLOW reply (xid=0x4):
  3.  cookie=0x0, duration=6770.969s, table=0, n_packets=5411, n_bytes=306944, idle_age=0, hard_age=65534, priority=0 actions=NORMAL