1. 链路聚合不只是“多根网线”那么简单如果你觉得公司里核心交换机和服务器之间的那条网线总是堵车或者担心某天它突然“罢工”导致整个部门断网那你可能就需要了解一下链路聚合了。别被这个听起来有点专业的名词吓到你可以把它简单理解为“把多根网线捆成一根更粗的‘管道’来用”。我处理过不少因为单条链路带宽不足或单点故障引发的网络问题链路聚合往往是成本最低、效果最直接的解决方案。它到底能干嘛简单说就两件事提升带宽和提供冗余。比如你有一台NAS和一台核心交换机它们之间原本只用一根千兆网线连接理论最大速度就是1Gbps。如果你再增加一根网线并把这两根网线通过链路聚合技术“捆绑”起来那么这两台设备之间的逻辑带宽就变成了2Gbps。更重要的是如果其中一根网线不小心被踢掉了或者网卡坏了所有流量会自动、无缝地切换到另一根正常的网线上业务几乎感觉不到中断。这对于需要7x24小时不间断服务的数据库服务器、虚拟化平台或者关键业务网关来说简直是“救命稻草”。那么谁适合用呢如果你是企业网管、数据中心运维或者是个爱折腾的家庭实验室玩家比如用多网口NAS做媒体库掌握链路聚合配置就是一项非常实用的技能。它不像升级万兆设备那样需要巨额投入利用好设备上现有的多个千兆口就能获得立竿见影的效果。接下来我们就从最基础的手工静态聚合开始一步步深入到更智能的动态LACP。2. 手工静态聚合稳定可靠的“手动挡”手工静态聚合顾名思义就是完全由网络管理员手工配置不依赖任何协议自动协商。你可以把它想象成手动挡汽车一切换挡操作都由司机管理员决定虽然不够自动化但结构简单非常稳定。很多老旧设备或者特定场景比如连接某些不支持LACP的存储设备下它依然是首选。它的工作原理很直接管理员在两台设备上分别创建一个逻辑的聚合接口比如Bridge-Aggregation 1然后把多个物理端口比如GigabitEthernet 1/0/1和1/0/2手工加入到这个组里。设备就会把这些物理端口当成一个逻辑端口来用。但这里有个关键要求聚合组两端的配置必须完全对称包括成员端口的数量、速率、双工模式以及二层聚合口上的VLAN配置等。如果配置不一致轻则部分端口无法聚合重则导致链路环路或中断。2.1 H3C设备静态二层聚合配置实战我们以两台H3C交换机SW1和SW2互连为例。假设我们使用G1/0/1和G1/0/2两个端口做聚合并且需要允许所有VLAN通过即配置为Trunk口。首先登录SW1进行配置H3Csystem-view [H3C]sysname SW1第一步创建二层聚合接口Bridge-Aggregation并配置为Trunk模式。[SW1]interface Bridge-Aggregation 1 [SW1-Bridge-Aggregation1]port link-type trunk [SW1-Bridge-Aggregation1]port trunk permit vlan all这里需要注意H3C设备的聚合组默认工作模式就是静态所以我们不需要额外指定link-aggregation mode static命令。接着将两个物理端口加入聚合组1。这里有个大坑我踩过好几次你必须先将物理端口的链路类型link-type和允许的VLAN配置得和聚合接口完全一致然后再执行加入聚合组的命令。否则你会看到类似Cant assign the port to the aggregation group because its attribute configurations are different than the aggregate interface.的错误提示。正确的配置顺序如下[SW1]interface GigabitEthernet 1/0/1 [SW1-GigabitEthernet1/0/1]port link-type trunk [SW1-GigabitEthernet1/0/1]port trunk permit vlan all [SW1-GigabitEthernet1/0/1]port link-aggregation group 1 [SW1-GigabitEthernet1/0/1]quit [SW1]interface GigabitEthernet 1/0/2 [SW1-GigabitEthernet1/0/2]port link-type trunk [SW1-GigabitEthernet1/0/2]port trunk permit vlan all [SW1-GigabitEthernet1/0/2]port link-aggregation group 1在另一台交换机SW2上你需要重复完全相同的配置步骤。配置完成后使用display link-aggregation verbose命令来验证。在输出信息中找到“Aggregation Mode: Static”并且查看每个成员端口的“Port Status”字段。如果显示为S (Selected)恭喜你说明这个端口是选中状态正在参与数据转发。如果显示为U (Unselected)则说明该端口因为某些属性不匹配比如对端没配、速率不一致等而未被选中这时你就需要仔细检查两端的配置了。2.2 静态聚合的优缺点与典型应用场景静态聚合最大的优点是配置简单资源消耗低。因为它不需要运行LACP协议来交换报文所以不会占用设备的CPU资源来处理协议报文在一些对性能极其敏感或设备性能有限的场景下很有优势。它的稳定性也极高一旦配好只要物理链路不断逻辑链路就一直在。但它的缺点也很明显缺乏智能检测能力。静态聚合只能检测到物理链路是否断开link down。如果出现一些更隐蔽的问题比如链路层故障、电缆质量差导致错包率高或者最要命的——链路错连静态聚合就无能为力了。举个例子本该连接SW1和SW2的线不小心一头插在了SW1上另一头插到了另一台交换机SW3上。对于静态聚合来说只要物理链路是通的它就会认为这根线是好的继续往上面发送流量导致数据发错目的地引发网络故障。排查这种问题往往非常耗时。所以静态聚合通常用在连接非常固定、拓扑简单且稳定的场景比如连接一台明确不支持LACP的老式服务器或防火墙。在实际项目中如果设备支持我通常会更倾向于使用接下来要讲的动态LACP模式。3. 动态LACP智能高效的“自动挡”如果说静态聚合是手动挡那么基于LACP链路聚合控制协议的动态聚合就是自动挡。它会通过LACP协议报文LACPDU和对端设备“打招呼”、协商自动决定哪些链路可以聚合在一起并且能实时监测链路状态实现故障的自动切换和恢复。这大大降低了管理员的配置和维护负担。LACP是IEEE 802.3ad标准定义的一种协议现在已并入802.1AX标准。它的工作流程可以概括为四步交互报文、选举主动端、确定活动链路、故障切换。两台设备会互相发送LACPDU报文里面包含系统优先级、MAC地址、端口优先级等信息。系统优先级高的设备成为“主动端”Actor由它来决定最终哪些端口作为活动链路Active转发数据哪些作为备份链路Standby。这种机制可以有效地避免因为一端配置错误而导致的聚合失效问题。3.1 H3C设备动态LACP聚合配置详解配置动态聚合前期步骤和静态聚合类似但多了一个关键命令指定聚合模式为动态。同样以SW1和SW2为例。在SW1上创建聚合接口并设置为动态模式H3Csystem-view [H3C]sysname SW1 [SW1]interface Bridge-Aggregation 1 [SW1-Bridge-Aggregation1]port link-type trunk [SW1-Bridge-Aggregation1]port trunk permit vlan all [SW1-Bridge-Aggregation1]link-aggregation mode dynamic这里link-aggregation mode dynamic命令就将聚合组1的工作模式切换到了动态LACP。然后将物理端口加入聚合组同样要确保端口属性先配置正确[SW1]interface GigabitEthernet 1/0/1 [SW1-GigabitEthernet1/0/1]port link-type trunk [SW1-GigabitEthernet1/0/1]port trunk permit vlan all [SW1-GigabitEthernet1/0/1]port link-aggregation group 1 [SW1-GigabitEthernet1/0/1]quit [SW1]interface GigabitEthernet 1/0/2 [SW1-GigabitEthernet1/0/2]port link-type trunk [SW1-GigabitEthernet1/0/2]port trunk permit vlan all [SW1-GigabitEthernet1/0/2]port link-aggregation group 1在SW2上做完全相同的配置。配置完成后再次使用display link-aggregation verbose命令查看。你会发现“Aggregation Mode”变成了“Dynamic”同时输出信息会比静态模式更丰富可能会看到LACP的系统优先级、端口优先级、操作Key等字段。端口状态同样要看是否为“S”。3.2 LACP的核心机制活动链路选举与M:N备份动态LACP有一个非常强大的功能叫做M:N备份。这是什么意思呢假设你在两台设备之间连接了4条物理链路N4但你通过配置只允许其中2条M2作为活动链路转发数据另外2条就作为备份链路。这样做的好处是你既获得了2条链路的带宽又拥有了额外的冗余链路。当某条活动链路故障时LACP会自动从备份链路中选出一条优先级最高的提升为活动链路整个过程是毫秒级的业务几乎无感知。如何控制哪些端口是活动链路呢这依赖于两个关键的优先级参数系统优先级和端口优先级。在LACP协商中先比较系统优先级数值小的优先成为主动端。如果系统优先级相同则比较设备的MAC地址MAC地址小的成为主动端。成为主动端的设备再根据自己这边端口的优先级同样是数值小的优先来决定哪些端口作为活动链路。你可以通过lacp system-priority和link-aggregation port-priority命令来调整这些优先级从而精细地控制流量路径。此外你还可以通过link-aggregation selected-port maximum命令来限制一个聚合组中最大活动接口的数量实现上述的M:N备份效果。这个功能在追求高可靠性的核心网络设计中非常有用。4. 进阶实战三层链路聚合与负载均衡调优前面的例子都是二层聚合主要用在交换机之间。但链路聚合同样可以应用在三层比如在路由器上或者在三层交换机上作为网关接口使用。这就是三层链路聚合Route-Aggregation。它的配置逻辑和二层聚合很像但聚合接口是一个三层接口需要配置IP地址。4.1 配置三层静态与动态聚合假设我们需要在SW1上创建一个三层聚合接口并给它配置IP地址 192.168.1.1/24同样将G1/0/1和G1/0/2两个物理口加入。对于三层静态聚合H3Csystem-view [H3C]sysname SW1 [SW1]interface Route-Aggregation 1 [SW1-Route-Aggregation1]ip address 192.168.1.1 24接下来是关键一步必须先将物理端口的工作模式从二层的“switchport”模式切换为三层的“routed port”模式才能将其加入三层聚合组。[SW1]interface GigabitEthernet 1/0/1 [SW1-GigabitEthernet1/0/1]port link-mode route [SW1-GigabitEthernet1/0/1]port link-aggregation group 1 [SW1-GigabitEthernet1/0/1]quit [SW1]interface GigabitEthernet 1/0/2 [SW1-GigabitEthernet1/0/2]port link-mode route [SW1-GigabitEthernet1/0/2]port link-aggregation group 1注意当你把端口模式改为route时接口可能会短暂down一下这是正常的。对于三层动态聚合步骤类似只需要在创建Route-Aggregation接口后多执行一步link-aggregation mode dynamic即可。4.2 理解与配置负载均衡算法链路聚合把多条链路绑成一条逻辑链路那么数据包具体从哪条物理链路发出去呢这就由负载均衡算法决定。这是一个非常重要但常被忽略的调优点。如果算法选得不好可能会导致流量分布不均某些链路拥塞而其他链路闲置。常见的负载均衡算法包括基于源MAC地址同一台设备的流量永远走同一条链路。如果网络里只有少数几台客户端访问一台服务器那么流量基本无法均衡。基于目的MAC地址去往同一台服务器的流量走同一条链路。如果所有客户端都访问同一台服务器比如网关那么所有流量都会挤到一条链路上。基于源IP地址同一源IP的流量走固定链路。基于目的IP地址同一目的IP的流量走固定链路。基于源IP和目的IP的哈希src-dst-ip这是比较常用且均衡效果较好的一种它结合了源和目的IP只要网络中存在多个不同的“源-目的”IP对流量就比较容易散开。基于源端口和目的端口的哈希在应用层流量多样时效果较好。在H3C设备上你可以通过全局命令来修改负载均衡模式。例如要设置为基于源和目的IP地址的哈希[SW1]link-aggregation global load-sharing mode destination-ip source-ip选择合适的算法需要分析你的实际流量模型。例如如果你的网络内部是“多对一”的访问模式很多电脑访问一台NAS那么基于目的IP的算法就不好如果是“多对多”服务器集群那么基于源目IP哈希通常是个安全的选择。我一般会在配置完成后使用display link-aggregation load-sharing mode命令查看当前生效的模式并在业务高峰期观察各成员端口的流量统计display interface brief来验证负载是否真的均衡了。5. 排错指南与最佳实践配置链路聚合时难免会遇到问题。根据我的经验90%的问题都出在配置不一致上。下面这个检查清单能帮你快速定位大部分故障物理层检查首先确认网线都插对了物理链路是Up的。别笑这真的是最高频的问题。模式匹配两端聚合模式必须一致。一端是静态另一端必须是静态一端是动态另一端也必须是动态。一端配了LACP另一端没配聚合肯定起不来。属性一致这是最复杂的部分。对于二层聚合需要检查端口速率和双工模式必须都是自协商或强制一致。端口的链路类型Access、Trunk、Hybrid必须相同。如果是Trunk允许通过的VLAN列表必须相同。STP生成树配置确保聚合口和成员口没有被STP Block掉。三层聚合额外检查确认物理端口已切换为三层模式port link-mode route。使用诊断命令display link-aggregation verbose这是最重要的命令。仔细查看每个成员端口的状态是Selected (S)还是Unselected (U)。如果是U状态下面通常会给出原因比如“attribute configurations are different”。display interface brief查看物理端口和聚合接口的物理状态和协议状态是否都是UP。在动态LACP模式下还可以使用display lacp statistics查看LACPDU报文的收发情况如果收不到对端的报文说明链路或对端配置有问题。关于最佳实践我分享几条血泪经验第一尽量使用动态LACP代替静态聚合。LACP能自动检测错连等故障可靠性高得多。第二在配置聚合前先规划好VLAN、IP等属性在聚合接口上配置然后再把物理端口加进去这样可以避免因属性不一致导致的端口无法选中。第三对于关键业务链路考虑使用M:N备份。比如4条链路中2条活动、2条备份在保证带宽的同时提供了极高的冗余性。第四负载均衡算法需要根据业务流量特点进行测试和调整不要一直用默认配置。最后链路聚合虽然强大但它不是万能的。它解决的是设备之间单条链路的带宽和可靠性问题并不能替代设备本身的冗余如堆叠、集群和网络路径的冗余如动态路由。在实际网络设计中通常需要将这些技术组合使用才能构建出一个真正健壮的高可用网络。我在项目里就经常把核心交换机的堆叠IRF和跨设备的链路聚合M-LAG结合使用那又是另一个层次的故事了。