目标：我希望尽可能在两个房间的任意一对主机之间提供 10-GbE 线速性能。

为了真正保证10G，您需要为每个主机的房间之间提供10G的专用带宽。每边 10 台主机需要 10*10 = 100G 的链接。聚合链路可能还不够，因为流是根据源/目标地址和端口进行平衡的——两个随机流很容易落在同一条物理链路上并在另一条链路空闲时争夺带宽。

也就是说，LAG 中继通常可以正常工作，除非网络非常繁忙或非常需要始终保证带宽。

我能否简单地在两台交换机之间连接 4 个 40 GbE 上行链路，并在两个房间之间获得约 160 Gbps 的带宽？

不可以。在交换机之间运行多个连接会导致桥接环路，进而导致广播风暴，从而导致网络瘫痪。

一种解决方案是使用生成树协议 (RSTP/MSTP)，但这仅对冗余链路有用（除了一条链路之外的所有链路都在操作上停用）。

您需要的是链路聚合 (LAG)，最好是 LACP，它是一种与供应商无关的 IEEE 聚合协议。将需要的接口放在两端的 LACP 中继组中，然后连接端口。请注意，您只能在两台交换机之间运行 LACP 中继 - 您不能在三个或更多交换机之间拆分和重组中继。

对于两个以上的交换机，有各种专有解决方案或最短路径桥接 (IEEE 802.1aq)，遗憾的是还没有流行起来。

编辑

我需要确保 UDP 数据报不会被任何上行链路端口的聚合重新排序。

这正是基于 SA/DA 散列分配流量的原因：以便流中的每个数据报始终使用相同的物理路径。如果您还需要避免在相同的两个终端节点之间的跨流超车，您需要确保仅使用源/目标 IP 地址而不是端口号。

/编辑

您是否还通过 LAG 中继中继 VLAN 并不重要。在所有端口上使用 STP 总是一个好主意，以防 LAG 中继出现问题或有人建立另一个链接。