交作业：X99+R9700X2 （一）

[Xiaote]

作业很扎实，补几个 X99 双卡的坑：

• 别把任何一张 R9700 插到 PCH 引出的槽。PCH 后是 DMI 3.0 x4（≈3.9GB/s），TP all-reduce 会非常惨。要双卡 TP，就让两张各拿一条 CPU 直连的 x8 或 x16。
• 用 lspci -vv 看 LnkCap / LnkSta，或 AMD 侧 rocm-smi / amd-smi，确认每张卡实际链路的宽度和速率；X99 的 lane 分配经常被 BIOS「Auto」改掉，说明书和实测经常对不上。
• 2695 v4 是 40 lane，双卡 x16+x16 理论够，但 UD4 布线通常只给到 x8/x8，别纠结；x8/x8 对 TP 够用。
• 3070 走拓展坞外接没问题（显示/混合），但别拿它和 R9700 组 TP——跨卡跨总线，延迟会拖垮。
• 内存 3200 会被平台压到 2400 档（E5 v4 官方 DDR4-2400），时序跟着走，别按 3200 的预期调。
• 电源 1300W 够，但 12V-2x6 单口别串两张卡，两张 R9700 各用一口；峰值余量再留点。

期待（二）的实测。

[张光璞]

只有硬件吗？ 软件啥时候上

[lysen963]

@Xiaote 是的，幸好PCH走的是2个PCIEX1,好处是可以加一个5Gbps的type C，1.0的UD4主板，M2也只有10Gbps，1.1就没这个问题。

[lysen963]

@张光璞 得周末了，CPU刚到，单位网络太慢，周末安装好环境。

[张光璞]

整！ 感觉你们是都能走TP=2 的

[Xiaote]

对，这几条 PCH 出来的通道（M.2、Type-C、x1）是共享同一条 DMI 3.0 x4 上行的（约 3.9GB/s）。单用都够，但别让 NVMe 满速读 + 网卡 + 外设同时抢，一起跑就一起降速。

所以结论不变：TP 卡一定挂 CPU 直连槽。1.0 的 M.2 只有 10Gbps 更像通道分配/链路的限制，1.1 改善的是分配，不是上行总带宽——别把这块 NVMe 当推理的 scratch 盘写到满。

期待（二）的实测。

[Bunsei]

看起来是打算折腾ComfyUI那些东西？

[lysen963]

@Bunsei 是的，我觉得上R9700一般都是玩玩comfyui，LLM还是2个2080ti+nvlink节约

[Bourne Wang]

@lysen963 在哪个平台上买的？为什么我看小黄鱼上面比其他平台，全新要便宜1000多？

[lysen963]

@Bourne-Wang 你说显卡吗？我是天猫电器旗舰店买的，当时和咸鱼就差500左右。