在Cisco Nexus 9000交换机上的VXLAN BGP EVPN中配置系统内基础设施vlan
简介
本文档介绍基于运行NX-OS操作系统的Cisco Nexus 9000交换机的虚拟可扩展局域网边界网关协议以太网VPN(VXLAN BGP EVPN)交换矩阵中system nve infra-vlans命令的用途。
当Nexus 9000交换机在虚拟端口通道(vPC)域中配置为VXLAN枝叶交换机(也称为VXLAN隧道终端(VTEP))时，必须使用接口VLAN在vPC对等链路上在它们之间具有备份第3层路由邻接关系。此VLAN必须是交换机的本地VLAN，而不是延伸到VXLAN交换矩阵，并且属于默认VRF（全局路由表）。
确保系统nve infra-vlans命令在Nexus 9000平台上（如以EX、FX和FX2结尾的Nexus 9300交换机）上就位，以指定VLAN可以用作上行链路，并通过vXLAN封装正确转发帧PC对等链路。
先决条件
要求
Cisco 建议您了解以下主题：
- Nexus NX-OS软件
- VXLAN BGP EVPN
使用的组件
本文档中的信息基于以下软件和硬件版本：
- 思科N9K-C93180YC-EX
- NXOS版本7.0(3)I7(6)
本文档中的信息都是基于特定实验室环境中的设备编写的。本文档中使用的所有设备最初均采用原始（默认）配置。如果您的网络处于活动状态，请确保您了解所有命令的潜在影响。
使用案例
下一个使用案例显示何时需要配置system nve infra-vlans命令。在所有这些命令中，分配的VLAN 777需要定义为system nve infra-vlans命令的一部分，并用于实例化vPC对等链路上的第3层路由备份邻接。此VLAN 777需要成为默认VRF（全局路由表）的一部分。
vPC中枝叶交换机上的孤立端口
此使用案例描述了连接到vPC域中单个Cisco Nexus 9000 VXLAN枝叶交换机部分的交换矩阵（主机A）内的终端主机。这称为孤立端口连接。作为路由的一部分，连接到交换矩阵中任何其他枝叶交换机的终端主机生成的流量在底层中同时流向vPC中的两个枝叶交换机（交换机枝叶A和交换机枝叶B）所拥有的NVE任播IP地址(10.12.12)。 这是为了利用所有枝叶到主干上行链路，同时使用等价多路径(ECMP)路由。在此场景中，在通过主干后，发往主机A的VXLAN帧可能会散列到没有直接连接到主机A的枝叶B。流量通过vPC对等链路时，系统需要使用infra-vlan和备用路由。
vPC中枝叶交换机上的上行链路故障
在此使用案例中，交换矩阵内的终端主机（主机A）双宿主到vPC域中的两个Cisco Nexus 9000 VXLAN枝叶交换机。但是，如果vPC中任何枝叶交换机上的所有上行链路都发生故障，而该枝叶交换机可以将其与主干交换机完全隔离，则需要系统内的infra-vlan和备份路由来使流量通过vPC对等链路，该链路现在是通向主干的唯一可能路径。例如，该图显示主机A的流量将其帧散列到隔离交换机枝叶A。该帧现在必须经过vPC对等链路。
vPC中的边界枝叶交换机
边界枝叶交换机可以在vPC中，通过与外部路由器交换网络前缀来从VXLAN交换矩阵提供连接。
这种与外部路由器的连接抽象地看作与WAN的连接。
如果链路发生故障，连接到WAN的边界枝叶交换机可能最终成为单宿主。在这种情况下，流量通过vPC对等链路需要系统内部基础设施vlan和备用路由，如下图所示。
边界枝叶交换机还可以使用静态路由或在租户 — VRF中实例化的路由协议在vPC对等链路上通告接口环回。此流量也将通过vPC对等链路传输。
最后，连接到边界枝叶交换机的外部路由器单个主机可以通告网络前缀，这些前缀可能需要vPC对等链路位于网络流量路径中，如下图所示。
芽节点
在Bud节点使用案例中，可以将基于硬件或软件的VTEP连接到Cisco Nexus 9000 VXLAN枝叶交换机。此VTEP可以发送到枝叶交换机VXLAN封装的流量。必须将用于与此硬件或软件VTEP连接的VLAN添加到system nve infra-vlans命令。
在本例中，它是VLAN 10，另外是VLAN 777。
配置
在此场景中，枝叶A和枝叶B是vPC中的VTEP。
已选择VLAN 777加入底层路由协议，在本例中为开放最短路径优先(OSPF)。
在每台枝叶A和枝叶B交换机上，OSPF已通过上行链路与主干交换机以及它们之间通过vPC对等链路建立邻接关系。
OSPF或中间系统到中间系统(IS-IS)可以是底层中使用的路由协议。
在全局配置模式下添加system nve infra-vlans命令，并选择vlan 777，因为它是用于底层OSPF邻接的vlan。
| 枝叶A |
|---|
LEAF_A# show ip ospf neighbors OSPF Process ID 1 VRF default Total number of neighbors: 2 Neighbor ID Pri State Up Time Address Interface 10.255.255.254 1 FULL/ - 00:02:52 10.255.255.254 Eth1/6 10.255.255.2 1 FULL/ - 02:16:10 10.1.2.2 Vlan777 LEAF_A# |
| 枝叶B |
|---|
LEAF_B# show ip ospf neighbors OSPF Process ID 1 VRF default Total number of neighbors: 2 Neighbor ID Pri State Up Time Address Interface 10.255.255.254 1 FULL/ - 02:21:53 10.255.255.254 Eth1/5 10.255.255.1 1 FULL/ - 02:13:51 10.1.2.1 Vlan777 LEAF_B# |
网络图
配置
| 枝叶A |
|---|
configure terminal ! hostname LEAF_A ! nv overlay evpn feature ospf feature bgp feature interface-vlan feature vn-segment-vlan-based feature nv overlay feature vpc feature lacp ! vlan 10 name VLAN_10_VRF_RED vn-segment 1000 vlan 100 name L3_VNI_VRF_RED vn-segment 10000 vlan 777 name BACKUP_VLAN_ROUTING_NVE_INFRA ! vpc domain 1 peer-keepalive destination 10.82.140.99 source 10.82.140.98 vrf management peer-switch peer-gateway layer3 peer-router ! interface Ethernet1/1 switchport switchport mode trunk channel-group 1 mode active no shutdown ! interface Port-Channel1 vpc peer-link no shutdown ! |
| 枝叶B |
|---|
configure terminal ! hostname LEAF_B ! nv overlay evpn feature ospf feature bgp feature interface-vlan feature vn-segment-vlan-based feature nv overlay feature vpc feature lacp ! vlan 10 name VLAN_10_VRF_RED vn-segment 1000 vlan 100 name L3_VNI_VRF_RED vn-segment 10000 vlan 777 name BACKUP_VLAN_ROUTING_NVE_INFRA ! vpc domain 1 peer-keepalive destination 10.82.140.98 source 10.82.140.99 vrf management peer-switch peer-gateway layer3 peer-router ! interface Ethernet1/1 switchport switchport mode trunk channel-group 1 mode active no shutdown ! interface Port-Channel1 vpc peer-link no shutdown ! |
| 枝叶C |
|---|
configure terminal
!
hostname LEAF_C
!
nv overlay evpn
feature ospf
feature bgp
feature interface-vlan
feature vn-segment-vlan-based
feature nv overlay
!
vlan 10
name VLAN_10_VRF_RED
vn-segment 1000
vlan 100
name L3_VNI_VRF_RED
vn-segment 10000
vlan 777
name BACKUP_VLAN_ROUTING_NVE_INFRA
!
fabric forwarding anycast-gateway-mac 000a.000b.000c
!
vrf context RED
vni 10000
rd auto
address-family ipv4 unicast
route-target both auto
route-target both auto evpn
!
interface Ethernet1/1
description TO SPINE
no switchport
medium p2p
ip unnumbered loopback1
ip ospf network point-to-point
ip router ospf 1 area 0.0.0.0
no shutdown
!
interface Ethernet1/49
description TO HOST-A
switchport
switchport access vlan 10
spanning-tree port type edge
no shutdown
!
interface loopback0
description NVE LOOPBACK
ip address 10.3.3.3/32
ip router ospf 1 area 0.0.0.0
!
interface loopback1
description OSPF & BGP ID
ip address 10.255.255.3/32
ip router ospf 1 area 0.0.0.0
!
interface Vlan100
no shutdown
vrf member RED
no ip redirects |
| 主干 |
|---|
configure terminal
!
hostname SPINE
!
nv overlay evpn
feature ospf
feature bgp
feature nv overlay
!
interface Ethernet1/5
description TO LEAF A
no switchport
medium p2p
ip unnumbered loopback1
ip ospf network point-to-point
ip router ospf 1 area 0.0.0.0
no shutdown
!
interface Ethernet1/6
description TO LEAF B
no switchport
medium p2p
ip unnumbered loopback1
ip ospf network point-to-point
ip router ospf 1 area 0.0.0.0
no shutdown
!
interface Ethernet1/1
description TO LEAF C
no switchport
medium p2p
ip unnumbered loopback1
ip ospf network point-to-point
ip router ospf 1 area 0.0.0.0
no shutdown
!
interface loopback1
description OSPF & BGP ID
ip address 10.255.255.254/32
ip router ospf 1 area 0.0.0.0
!
router ospf 1
router-id 10.255.255.254
!
router bgp 65535
router-id 10.255.255.254
address-family ipv4 unicast
address-family l2vpn evpn
retain route-target all
neighbor 10.255.255.1
remote-as 65535
update-source loopback1
address-family ipv4 unicast
address-family l2vpn evpn
send-community
send-community extended
route-reflector-client
neighbor 10.255.255.2
remote-as 65535
update-source loopback1
address-family ipv4 unicast
address-family l2vpn evpn
send-community
send-community extended
route-reflector-client
neighbor 10.255.255.3
remote-as 65535
update-source loopback1
address-family ipv4 unicast
address-family l2vpn evpn
send-community
send-community extended
route-reflector-client
!
end |
验证
运行命令show system nve infra-vlans，确保vlan显示在“当前活动的infra Vlans”下。
| 枝叶A |
|---|
LEAF_A# show system nve infra-vlans Currently active infra Vlans: 777 Available Infra Vlans : 7-264,266-511,519-776,778-1023,1031-1288,1290-1535,1543-1800,1802-2047,2055-2312,2314-2559,2567-2824,2826-3071,3079-3336,3338-3583,3591-3848,3850-3967 *Configuration of two infra-vlans which are 512 apart is not allowed. Ex: 4, 516 are not allowed to be configured together LEAF_A# |
| 枝叶B |
|---|
LEAF_B# show system nve infra-vlans Currently active infra Vlans: 777 Available Infra Vlans : 7-264,266-511,519-776,778-1023,1031-1288,1290-1535,1543-1800,1802-2047,2055-2312,2314-2559,2567-2824,2826-3071,3079-3336,3338-3583,3591-3848,3850-3967 *Configuration of two infra-vlans which are 512 apart is not allowed. Ex: 4, 516 are not allowed to be configured together LEAF_B# |
故障排除
如果LEAF A交换机遇到上行链路故障，并且它不再直接连接到SPINE交换机，则仍可以通过作为SPINE交换机备份上行链路的vPC对等链路上的infra-vlan实现连通性。
| 枝叶A |
|---|
LEAF_A# show mac address-table vlan 10
Legend:
* - primary entry, G - Gateway MAC, (R) - Routed MAC, O - Overlay MAC
age - seconds since last seen,+ - primary entry using vPC Peer-Link,
(T) - True, (F) - False, C - ControlPlane MAC, ~ - vsan
VLAN MAC Address Type age Secure NTFY Ports
---------+-----------------+--------+---------+------+----+------------------
* 10 0000.0000.000a dynamic 0 F F Eth1/54
C 10 0000.0000.000b dynamic 0 F F nve1(10.3.3.3)
G 10 00be.755b.f1b7 static - F F sup-eth1(R)
G 10 4c77.6db9.a8db static - F F vPC Peer-Link(R)
LEAF_A# |
反馈