我们今天花点时间来看一块基于 Broadcom 的 PEX89144（144 Lane PCIe 5.0 Switch）开发的 Gen5 Switch Board，这张卡本质上是一块“可编程拓扑结构实验平台”，对于需要做高端互连测试、割裂测试、故障注入、协议分析的团队来说，战略价值非常高。废话不多说，先上图。

Gen5 x16 144 lane switch实际物理连接拓扑图（上行连接到主机）

下面我重点围绕常用的两个场景，同时延展其在验证体系中的其它应用价值，做个简单介绍。希望详细了解的朋友可以通过该文章底部下载白皮书，或者联系我们。

一、硬件结构解析：144 Lane 的完全释放

1️⃣ 物理资源配置

这块 switch board：

• 核心芯片：PEX89144（PCIe Gen5）

• 总 lane 数：144 lanes

• 接口形态：18 个 MCIO x8

• 逻辑组合：

• 2 个 MCIO x8 = 1 个 x16

• 共 9 组 x16

• 9 × 16 = 144 lanes（完全占满）

这是非常“工程理性”的设计 —— 没有浪费 lane。

2️⃣ 板级结构特征（结合图片）

从图可以看到：

• 中央为 PEX89144 + 主动散热

• 周围环绕 18 个 MCIO x8 接口

• 通过 adapter：

• 上行 → 插入主机 Gen5 x16 slot

• 下行 → 连接 endpoint 割裂板 / DUT

这种设计的核心思想是：

把 PCIe Gen5 Switch 从“服务器内部资源”抽象成“可外接拓扑实验平台”

这对于做验证和故障定位极其关键。

二、场景一：单 Uplink x16 + 8 Downlink x16

拓扑结构

Host (RC)
   │
 Gen5 x16
   │
 PEX89144
   ├─ x16 → EP1
   ├─ x16 → EP2
   ├─ x16 → EP3
   ├─ x16 → EP4
   ├─ x16 → EP5
   ├─ x16 → EP6
   ├─ x16 → EP7
   └─ x16 → EP8

关键能力

✔ 最大扇出测试能力

• 单个 RC

• 同时驱动 8 个 x16 Endpoint

• 全 Gen5 速率（32GT/s）

带宽计算：

• 单 x16 Gen5 ≈ 64 GB/s 单向

• 8 × 64 GB/s = 512 GB/s aggregate downstream

这在实验环境中非常夸张。

场景一的核心测试价值

1️⃣ 大规模并行 Endpoint 压测

适用于：

• 8 块或者16块 Gen5 SSD

• 8 块 Gen5 NIC

• 8 块 AI 加速卡

可以测试：

• Switch 内部 arbitration 行为

• Head-of-line blocking

• Virtual Channel 调度

• ACS / AER / DPC 触发情况

2️⃣ 典型应用（结合日常实验室测试）

• 多块 E3.S Gen5 SSD 在单 RC 下的公平性测试

• 多 GPU/NIC 混插场景

• 端口电气异常时对其它端口的影响

这对于做：

• PCIe analyzer + PAM

• 故障注入

• 电气 Idle 诊断

极具价值。

三、场景二：多 Uplink 架构（例如 3×x16 Uplink）

这是这颗芯片真正“高级”的地方。

可通过 firmware 重构端口类型

PEX89144 支持：

• 多个 Root Port

• 端口角色可配置

• SR-IOV / NTB 模式支持

• Port bifurcation

• Non-transparent bridge

举例：3 Uplink + 6 Downlink

Host A ─ x16
Host B ─ x16
Host C ─ x16
            │
         PEX89144
            │
        6 × x16 EP

场景二的战略价值

1️⃣ 多主机共享设备池测试

可以验证：

• 多 RC 同时访问 Switch

• Multi-root I/O Virtualization

• Peer-to-peer path routing

适合：

• CXL 未来架构过渡验证

• 多 CPU 节点共享加速卡

2️⃣ 高端应用场景延展

结合 Broadcom 官方典型应用：

• GPU fabric

• NVMe JBOF

• AI 训练平台

• Composable Infrastructure

• Disaggregated Storage

你这块板实际上可以做：

“简化版的 PCIe Gen5 Composable Fabric 验证平台”

四、PEX89144 技术亮点拓展

1️⃣ 非透明桥（NTB）

可以：

• 两台服务器互联

• 共享内存

• 做 HA 测试

2️⃣ Peer-to-Peer

Switch 内部支持：

• EP ↔ EP

• 不经 Host

这对 GPU P2P、NVMe P2P 很关键。

3️⃣ 强大的错误管理

• AER

• ECRC

• Hot reset propagation

• Surprise Down

你可以构建复杂故障场景：

• 某个端口 electrical idle

• 某个 lane degrade

• 某端口降速

• Link flap

观察其它端口行为。

五、对于从事CPU/GPU/DPU/NIC/SSD验证实验室的意义

你们如果经常需要如下针对PCIe的测试，例如：

• 针对PCIe 5.0接口的CPU, GPU, DPU, NIC, SSD测试

• 故障注入

• 高速链路诊断

• Switch/Retimer/Redriver验证

这块 144-lane switch board 可以成为：

“拓扑可编程实验母板”

它的价值在于：

✔ 可以模拟服务器真实拓扑

✔ 可以构造边缘异常场景

✔ 可以进行多设备冲突压力测试

✔ 可以验证 retimer 行为

✔ 可以测试 L0p / ASPM 交互

六、技术深度总结

七、从商业视角的定位

这块板本质是：

Gen5 高密度 PCIe Fabric 实验核心

它可以成为：

• SSD 厂商验证平台

• AI 加速卡互连平台

• Retimer 厂商调试平台

• 协议分析器验证平台

• CXL 过渡验证基础设施

八、一句话概括：

这块 PEX89144 144-lane Gen5 Switch Board，是一个可以被 firmware 重新定义拓扑的“PCIe 5.0 实验级可组合互连核心”。

它的真正价值，不在 144 lanes，而在“可编程拓扑”。

链接: https://pan.baidu.com/s/1R-tJEqwBlzBaDR0WLuMU0Q?pwd=9av3 提取码: 9av3

如果你有其任何关于PCIe5&6.0, CXL, NVMe/NVMoF, NAND, DDR5/LPDDR5以及UFS测试方面的我问题想咨询，请访问：访问www.saniffer.cn / www.saniffer.com 访问我们的相关测试工具和产品；或者添加点击左下角“阅读原文”留言，或者saniffer公众号留言，致电021-50807071 / 13127856862，sales@saniffer.com。