目  录

1 M-LAG EVPN VxLAN集中式网关组网配置举例（以太网聚合链路作为peer-link）（园区）

1.1 组网需求

1.2 适用设备及使用版本

1.3 配置思路

1.4 配置注意事项

1.5 配置IP地址和单播路由协议

1.6 配置M-LAG设备

1.6.1 配置概览

1.6.2 配置M-LAG

1.6.3 配置M-LAG设备互联的三层链路

1.6.4 配置M-LAG设备与Server的互联链路

1.7 配置上行设备Leaf 3

1.7.1 配置概览

1.7.2 配置EVPN VxLAN

1.8 配置网关设备Spine

1.8.1 配置概览

1.8.2 配置EVPN VxLAN

1.9 流量模型

1.9.1 流量概念

1.9.2 Overlay流量

1.10 收敛时间测试

1.10.1 单点故障测试

1.11 验证配置

1.11.1 验证配置命令行

1.11.2 验证配置详细信息

1.12 升级操作

1.12.1 升级前的命令行检查

1.12.2 升级操作

1.12.3 升级操作中流量中断时间

1.12.4 升级后的命令行检查

1.13 扩容操作

1.13.1 扩容前的命令行检查

1.13.2 扩容操作

1.13.3 扩容操作中流量中断时间

1.13.4 扩容后的命令行检查

1.14 替换操作

1.14.1 业务板替换操作

1.14.2 网板替换操作

1 M-LAG EVPN VxLAN集中式网关组网配置举例（以太网聚合链路作为peer-link）（园区）

1.1  组网需求

如图1-1所示：

·     Leaf 1和Leaf 2组成M-LAG系统，采用以太网聚合链路作为peer-link链路。

·     Server A单挂接入Leaf 1、Server B通过M-LAG接口接入M-LAG系统。

·     Leaf 1和Leaf 2通过等价路由接入到上行设备Spine。

·     Spine为与广域网连接的集中式EVPN网关设备，Spine同时作为路由反射器在Leaf 1、Leaf 2、Leaf 3之间反射路由。

用户应用需求：

·     Server A和Server B属于VXLAN 10，Server C属于VXLAN 20，通过集中式EVPN网关实现Server A、Server B和Server C互通。

·     当M-LAG的两个成员设备有链路故障时，Server A、Server B、Server C仍然互通。

图1-1 M-LAG EVPN VxLAN组网图（以太网聚合链路作为peer-link）

1.2  适用设备及使用版本

1.3  配置思路

·     Leaf 1、Leaf 2作为M-LAG设备，以太网聚合链路作为peer-link链路；

·     Leaf 1、Leaf 2通过等价路由接入到上行设备Spine；

·     Leaf 1、Leaf 2之间在peer-link上配置OSPF邻居，连通单挂业务，同时作为网络侧与单挂业务的备份路径；

·     Overlay上，IPv4和IPv6网络配置同时存在；

1.4  配置注意事项

配置前设备的所有参数均采用出厂时的缺省配置。如果您已经对设备进行了配置，为了保证配置效果，请确认现有配置和以下配置不冲突。

M-LAG主备设备需要部署不同的上行VLAN接口，避免形成环路；确保物理无环路情况下，推荐关闭端口的STP功能。

M-LAG主备设备上，peer-link上动态AC的报文匹配规则方案必须相同。

·     方案一：采用VXLAN ID映射方式生成peer-link上动态AC的报文匹配规则：

l2vpn m-lag peer-link ac-match-rule vxlan-mapping

缺省情况下，用户侧接口上创建以太网服务实例、配置报文匹配规则并关联VSI后，VTEP会在peer-link上自动创建具有相同报文匹配规则、关联相同VSI的AC。在这种情况下，如果不同用户侧接口上AC的报文匹配规则相同，但关联了不同的VSI，则会导致peer-link上动态创建的AC之间发生冲突。本命令用来解决上述问题。

·     方案二：根据用户侧以太网服务实例的报文匹配规则创建peer-link接口上的AC。

无需执行其他配置，默认采用该方案。

1.5  配置IP地址和单播路由协议

# 在服务器A和服务器B上指定网关地址为10.1.1.1/10::1；在服务器C上指定网关地址为10.1.2.1/11::1。

# 配置各接口的IP地址和子网掩码。（具体配置过程略）

# 在IP核心网络内配置OSPF协议，发布各接口IP地址（包括Loopback接口的IP地址）对应网段的路由，确保交换机之间路由可达，OSPF接口建议配置ospf peer hold-max-cost duration 300000。（具体配置过程略）

1.6  配置M-LAG设备

1.6.1  配置概览

配置M-LAG

配置M-LAG设备互联的三层链路

配置M-LAG设备与Server的互联链路

1.6.2  配置M-LAG

1.6.3  配置M-LAG设备互联的三层链路

1.6.4  配置M-LAG设备与Server的互联链路

1.7  配置上行设备Leaf 3

1.7.1  配置概览

配置EVPN VxLAN

1.7.2  配置EVPN VxLAN

1.8  配置网关设备Spine

1.8.1  配置概览

配置EVPN VxLAN

1.8.2  配置EVPN VxLAN

1.9  流量模型

1.9.1  流量概念

流量模型描述表格主要包含以下信息：

·     编号：即流量编号，格式为O-X-XXX。其中，O表示Overrlay流量；X表示协议号，取值包括4（IPv4）和6（IPv6）；XXX表示流量序号，从001开始。

·     类型：即流量类型，取值包括已知单播/IPV4、单播/L2等。

·     流量方向：即流量的发送方向，取值包括跨Leaf东西、南北等。

·     流量路径：即流量经过的每个节点。

·     仿真方式：进行本组网测试时，采用的流量仿真方式，一般为测试仪仿真，即采用测试仪模拟服务器发送流量。

·     流量大小：取值包括轻载（仿真流量小于1000条流）和重载（仿真流量大于1000条流）。

·     上墙/LB方式：不涉及/PBR/M-LAG+VRRP/静态路由等实际配置方式。

1.9.2  Overlay流量

1.10  收敛时间测试

1.10.1  单点故障测试

表1-1 链路单点故障测试情况表

1.11  验证配置

1.11.1  验证配置命令行

表1-2 配置验证命令汇总表

1.11.2  验证配置详细信息

1. 验证EVPN网关设备Spine

# 查看Spine上的EVPN路由信息，可以看到Spine发送了网关的MAC/IP路由和IMET路由，并接收到Leaf 1、Leaf 2和Leaf 3发送的MAC/IP路由和IMET路由

[Spine] display bgp l2vpn evpn

BGP local router ID is 3.3.3.3

 Status codes: * - valid, > - best, d - dampened, h - history,

               s - suppressed, S - stale, i - internal, e - external

               a - additional-path

               Origin: i - IGP, e - EGP, ? - incomplete

 Total number of routes from all PEs: 5

 Route distinguisher: 1:100

 Total number of routes: 5

* >  Network : [2][0][48][0800-2700-400e][0][0.0.0.0]/104

     NextHop : 0.0.0.0                                  LocPrf    : 100

     PrefVal : 32768                                    OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

*  i Network : [2][0][48][0800-2700-400e][0][0.0.0.0]/104

     NextHop : 1.2.3.4                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

* >i Network : [3][0][32][1.2.3.4]/80

     NextHop : 1.2.3.4                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

* >i Network : [3][0][32][3.3.3.3]/80

     NextHop : 0.0.0.0                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

* >i Network : [3][0][32][2.2.2.2]/80

     NextHop : 1.2.3.4                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

# 查看Spine上的Tunnel接口信息，可以看到VXLAN模式的Tunnel接口处于up状态，并且隧道目的地址是虚拟VTEP地址

[Spine] display interface tunnel

Tunnel0

Current state: UP

Line protocol state: UP

Description: Tunnel0 Interface

Bandwidth: 64 kbps

Maximum transmission unit: 1464

Internet protocol processing: Disabled

Output queue - Urgent queuing: Size/Length/Discards 0/100/0

Output queue - Protocol queuing: Size/Length/Discards 0/500/0

Output queue - FIFO queuing: Size/Length/Discards 0/75/0

Last clearing of counters: Never

Tunnel source 3.3.3.3, destination 1.2.3.4

Tunnel protocol/transport UDP_VXLAN/IP

Last 300 seconds input rate: 0 bytes/sec, 0 bits/sec, 0 packets/sec

Last 300 seconds output rate: 0 bytes/sec, 0 bits/sec, 0 packets/sec

Input: 0 packets, 0 bytes, 0 drops

Output: 0 packets, 0 bytes, 0 drops

# 查看Spine上的VSI信息，可以看到VSI内创建的VXLAN、与VXLAN关联的VXLAN隧道、与VSI关联的VSI虚接口等信息

[Spine] display l2vpn vsi verbose

VSI Name: vpna

  VSI Index               : 0

  VSI State               : Up

  MTU                     : 1500

  Bandwidth               : Unlimited

  Broadcast Restrain      : Unlimited

  Multicast Restrain      : Unlimited

  Unknown Unicast Restrain: Unlimited

  MAC Learning            : Enabled

  MAC Table Limit         : -

  MAC Learning rate       : -

  Drop Unknown            : -

  Flooding                : Enabled

Statistics              : Disabled

  Gateway Interface       : VSI-interface 1

  VXLAN ID                : 10

  Tunnels:

    Tunnel Name          Link ID    State    Type        Flood proxy

    Tunnel0              0x5000000  UP       Auto        Disabled

VSI Name: vpnb

  VSI Index               : 1

  VSI State               : Up

  MTU                     : 1500

  Bandwidth               : Unlimited

  Broadcast Restrain      : Unlimited

  Multicast Restrain      : Unlimited

  Unknown Unicast Restrain: Unlimited

  MAC Learning            : Enabled

  MAC Table Limit         : -

  MAC Learning rate       : -

  Drop Unknown            : -

  Flooding                : Enabled

  Statistics              : Disabled

  Gateway Interface       : VSI-interface 2

  VXLAN ID                : 20

  Tunnels:

    Tunnel Name          Link ID    State    Type        Flood proxy

    Tunnel1              0x5000001  UP       Auto        Disabled

2. 验证分布式聚合设备

# 查看Leaf 1上的EVPN路由信息

[Leaf 1] display bgp l2vpn evpn

 BGP local router ID is 1.2.3.4

 Status codes: * - valid, > - best, d - dampened, h - history,

               s - suppressed, S - stale, i - internal, e - external

               a - additional-path

               Origin: i - IGP, e - EGP, ? - incomplete

 Total number of routes from all PEs: 5

 Route distinguisher: 1:100

 Total number of routes: 5

* >  Network : [2][0][48][0800-2700-400e][0][0.0.0.0]/104

     NextHop : 1.2.3.4                                  LocPrf    : 100

     PrefVal : 32768                                    OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

* >i Network : [2][0][48][46b2-aea0-0101][0][0.0.0.0]/104

     NextHop : 3.3.3.3                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

* >  Network : [2][0][48][ac1e-24e3-0201][0][0.0.0.0]/104

     NextHop : 3.3.3.3                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

MED     : 0

     Path/Ogn: i

* >i Network : [3][0][32][1.2.3.4]/80

     NextHop : 1.2.3.4                                  LocPrf    : 100

     PrefVal : 32768                                    OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

* >i Network : [3][0][32][3.3.3.3]/80

     NextHop : 3.3.3.3                                  LocPrf    : 100

     PrefVal : 0                                        OutLabel  : NULL

     MED     : 0

     Path/Ogn: i

# 查看Leaf 1上的Tunnel接口信息，可以看到VXLAN模式的Tunnel接口处于up状态，并且隧道源地址是虚拟VTEP地址

[Leaf 1] display interface tunnel

Tunnel0

Current state: UP

Line protocol state: UP

Description: Tunnel0 Interface

Bandwidth: 64 kbps

Maximum transmission unit: 1464

Internet protocol processing: Disabled

Output queue - Urgent queuing: Size/Length/Discards 0/100/0

Output queue - Protocol queuing: Size/Length/Discards 0/500/0

Output queue - FIFO queuing: Size/Length/Discards 0/75/0

Last clearing of counters: Never

Tunnel source 1.2.3.4, destination 3.3.3.3

Tunnel protocol/transport UDP_VXLAN/IP

Last 300 seconds input rate: 0 bytes/sec, 0 bits/sec, 0 packets/sec

Last 300 seconds output rate: 0 bytes/sec, 0 bits/sec, 0 packets/sec

Input: 0 packets, 0 bytes, 0 drops

Output: 0 packets, 0 bytes, 0 drops

# 查看Leaf 1上的VSI信息，可以看到设备自动在IPL上创建了AC，并将其与VSI关联

[Leaf 1] display l2vpn vsi verbose

VSI Name: vpna

  VSI Index               : 1

  VSI State               : Up

  MTU                     : 1500

  Bandwidth               : Unlimited

  Broadcast Restrain      : Unlimited

  Multicast Restrain      : Unlimited

  Unknown Unicast Restrain: Unlimited

  MAC Learning            : Enabled

  MAC Table Limit         : -

  MAC Learning rate       : -

  Drop Unknown            : -

  Flooding                : Enabled

  Statistics              : Disabled

  VXLAN ID                : 10

  Tunnels:

    Tunnel Name          Link ID    State    Type        Flood proxy

    Tunnel0              0x5000000  UP       Auto        Disabled

  ACs:

    AC                               Link ID  State       Type

XGE1/0/1 srv1000                 0        Up          Manual

    BAGG1 srv2                       1        Up          Dynamic (M-LAG)

BAGG3 srv1000                    2        Up          Manual

3. Server A/Server B、Server C互通

4. Leaf 1或Leaf 2的下行M-LAG成员口故障时，Server B、Server C仍然可以互通（流量切换过程中有短暂丢包）

5. Leaf 1或Leaf 2的上行接口故障时，Server A/Server B、Server C仍然可以互通（流量切换过程中有短暂丢包）

1.12  升级操作

1.12.1  升级前的命令行检查

升级前的命令行检查，请参见“1.11  验证配置”和以下表格中的命令行。

表1-3 升级前的命令行检查汇总表

1.12.2  升级操作

升级设备软件前，请进行如下操作：

(1)     使用display version命令查看设备当前运行的BootWare程序以及启动软件的版本。

(2)     获取新软件的版本发布说明书，了解新软件的版本号、软件大小以及和当前运行的BootWare程序以及Comware软件的兼容性。

(3)     通过版本发布说明书了解将安装的软件包是否需要License。如果需要，查看设备上是否有对应的有效的License。如果没有，请先安装License。否则，会导致软件包安装失败。

(4)     使用dir命令查看存储介质是否有足够的空间存储新的软件。如果存储空间不足，可使用delete命令删除一些暂时不用的文件。请保证系统中所有的主控板都有足够的存储空间。

(5)     Leaf 1设备与Leaf 2设备组成M-LAG系统后：

a.     检查Leaf 1设备的LLDP邻居，得到Leaf 1设备上所有接口的LLDP状态信息。

b.     Leaf 1设备上除peer-link接口和Keepalive接口之外，所有连接到其他设备的接口均手动shutdown。

c.     将Leaf 1设备所有进出的流量都切换到Leaf 2设备上面。

(6)     保存Leaf 1设备的配置，使用FTP、TFTP方式将新软件包下载到任一文件系统的根目录下，升级Leaf 1设备并重启。

(7)     在Leaf 1设备重启期间，手动在Leaf 2设备上shutdown与Leaf 1设备的互连接口。该接口一般是peer-link接口和Keepalive接口。

(8)     Leaf 1设备重启完成后，在Leaf 2设备上undo shutdown之前shutdown的接口，等待Leaf 1设备与Leaf 2设备恢复M-LAG。

(9)     待Leaf 1设备与Leaf 2设备重新组成M-LAG系统后，undo shutdown之前所有连接到其他设备的接口以恢复业务流量。

详细升级操作指导，请参见“H3C交换机M-LAG升级指导”。

具体升级方式没有特殊要求，以现场情况为准。

1.12.3  升级操作中流量中断时间

参见“1.10  收敛时间测试”，每台设备升级操作涉及的流量中断时间包括“重启一台M-LAG设备”和“重启的M-LAG设备恢复”两个过程。

1.12.4  升级后的命令行检查

升级后的命令行检查，请参见“1.11  验证配置”和以下表格中的命令行。

表1-4 升级后的命令行检查汇总表

1.13  扩容操作

1.13.1  扩容前的命令行检查

扩容前的命令行检查，请参见“1.11  验证配置”和以下表格中的命令行。

表1-5 扩容前的命令行检查汇总表

1.13.2  扩容操作

(1)     新增设备断开网管

(2)     升级完成相应版本

(3)     做好配置

(4)     接入网管

1.13.3  扩容操作中流量中断时间

不涉及。

1.13.4  扩容后的命令行检查

扩容后的命令行检查，请参见下表中的命令行。

表1-6 扩容后的命令行检查汇总表

1.14  替换操作

1.14.1  业务板替换操作

1. 替换前的命令行检查

替换前的命令行检查，请参见“1.11  验证配置”和以下表格中的命令行。

表1-7 替换前的命令行检查汇总表

2. 替换操作

相关业务板上的业务及网管流量应先行切换到正常业务板上。

支持业务板热插拔或者整机断电替换，具体根据现场情况而定。

3. 替换操作中流量中断时间

参见“1.10  收敛时间测试”，每块接口板替换操作涉及的流量中断时间根据具体组网情况，包括“M-LAG设备链路单点故障”、“上行链路单点故障”和“M-LAG设备链路单点故障恢复”、“上行链路单点故障恢复”多个过程。

4. 替换后的命令行检查

与替换前命令行检查相同。

1.14.2  网板替换操作

1. 替换前的命令行检查

替换前的命令行检查，请参见“1.11  验证配置”和以下表格中的命令行。

表1-8 替换前的命令行检查汇总表

2. 替换操作

支持网板热插拔或者整机断电替换，具体根据现场情况而定。

3. 替换操作中流量中断时间

参见“1.10  收敛时间测试”，每块网板替换操作涉及的流量中断时间包括“网板故障”和“网板恢复”两个过程。

4. 替换后的命令行检查

与替换前命令行检查相同。