@terry 我最近都在忙公司採購... 是真的漲，B300 也是漲到破百萬刀了，PRO6000 上週一次8卡訂單一張 42~45萬台幣，下週預報 57萬牌價，成交價暫時不知

下週顯卡漲20% 別考慮了先買再說...

為啥不買 EPYC 7002/7003 就好了？ 我目前 AM5 9950x3d 效能已經過剩了

@kos-or 看到有意思的板子 ROMED4ID-2T
但配套還沒有全部買齊，就慢慢賺錢一邊收

https://www.newegg.com/asrock-rack-romed4id-2t-amd-epyc-7002-series-processors/p/N82E16813140059?srsltid=AfmBOoqkmMi9BC4TC94y3QT7yDvXoFy298sZ28C7Vs1HXI3dCnMsx-5t
參考圖

@kos-or 要看你的主板，還有處理器需要什麼？ 我自己最近打算收一套 64 *4 的 ddr4 3200 ecc rdimm ，X99 對應的記憶體記得蠻便宜的

@agi 虚拟机不认显卡應該是晶片組的分拆沒有正確的指派群組？ 功耗的問題的話應該是顯卡驅動可能不對吧？ 可以先讓AI幫你分析一下主機板的晶片組還有PC IE通道的分組

@566656661 可以跑，但沒想法ＸＤ 來個方案我測測

@williamlouis win11 我折騰一個晚上都搞不定，解決方案眾說紛紜.... 原本還想試試看雙卡遊戲的跑分

@sarcoma 卡在哪邊啊？ 如果不是硬體問題的話，現在的版本我感覺沒啥難度。 真的不行你讓AI幫你處理一下。

PVE HomeLab ( R9700x2+3090) 極限方案

這一邊是基於前一篇分享 https://lcz.me/post/4772

項目	舊	新
GPU	1× R9700（+ RTX 3090）	**2× R9700 + 1× RTX 3090 **
記憶體	64GB（2×32GB Kingston）	96GB（2×48GB Crucial/Micron DDR5-5600），4 槽用 2 槽，可擴 192GB
額外儲存	—	新增 WD 500GB SATA SSD
VM 數量	100/101/103/104	再加 105 cuda-llm-lab**
GPU passthrough	單張輪流	三張獨立 mapping（雙 R9700 可各自分派給不同 VM）

硬體規格

項目	品牌	規格
主機板	ASUS	ProArt B850-CREATOR WIFI NEO
CPU	AMD	Ryzen 9 9950X3D，16C / 32T
記憶體	Crucial / Micron	DDR5-5600 96GB（48GB × 2，Part CP48G56C46U5.M16B1），4 槽用 2 槽
顯示卡 #1	ASUS	Radeon AI PRO R9700（Navi 48 / RDNA4，32GB），PCI 03:00
顯示卡 #2	PowerColor	Radeon AI PRO R9700（Navi 48 / RDNA4，32GB），PCI 07:00
顯示卡 #3	ZOTAC	GeForce RTX 3090（GA102，24GB），PCI 0a:00
內顯	AMD	Granite Ridge Radeon Graphics（iGPU），PCI 12:00
有線網路	Realtek	RTL8126 5GbE × 2
無線網路	Realtek	RTL8922AE Wi-Fi 7 / 802.11be
系統碟	Crucial	T500 NVMe SSD，2TB（CT2000T500SSD8）
媒體碟	Samsung	PM9A1 類 NVMe SSD，約 477GB（MZVL2512HDJD）
追加資料碟	WDC	WD Blue 500GB SATA SSD（WDS500G2B0A，ext4）
Windows 系統碟	Predator	GM9 NVMe SSD，約 1TB（NTFS，獨立 Windows 11，星際公民用）
CPU 散熱	DeepCool Digital	ASSASSIN IV VC VISION
機殼風扇	Noctua	12cm PWM / 14cm
電源	NZXT	1500W
機殼	Cooler Master	QUBE 540

3090的話是採用開源宇宙的 OCulink + ADT m.2 PCIE 連接器，

採購建議 :
| 開源宇宙的質感極差，文件相關的資訊也不清楚
| ADT 品質不錯，但如果你放在機殼裡面的話建議超過50公分會比較好處理，然後要注意方向

目前的配置全部都是靠風冷，採用貓頭鷹官方推薦的上下進出佈局，基本上溫度都可以壓在50到70之間，極少時候才能拉到80，外部顯卡反而散熱的問題很嚴重，所以在機殼側邊掛了一顆酷冷的12cm風扇直吹

PCIe 通道分拆與 8×8 顯卡策略

9950X3D（Granite Ridge / AM5）對外總共 28 條 PCIe 5.0 lane：24 條給裝置、4 條當晶片組上行。這台把 28 條全部用好用滿，實測從 CPU root port 拉出來的分配如下：

CPU root port	Lane（LnkCap）	掛什麼	協商速度 (LnkSta)	說明
00:01.1	x8	R9700 #1（ASUS，03:00）	Gen5 x8	顯卡通道前半
00:01.3	x8	R9700 #2（PowerColor，07:00）	Gen5 x8	顯卡通道後半
00:01.2	x4	Predator GM9 M.2（Windows 碟）	Gen5 x4	CPU 直連 M.2
00:02.2	x4	Crucial T500 M.2（PVE 系統碟）	Gen4 x4	CPU 直連 M.2
00:02.1	x4	→ B850 晶片組上行	Gen4 x4	底下再扇出一堆裝置

核心策略：把 CPU 的 16 條顯卡 lane 對半拆成 x8 + x8，兩張 R9700 各吃一半。
這是 AM5 平台想「兩張主力卡都直連 CPU」的唯一解——AM5 只有 16 條 PEG lane，要塞兩張就必須在 BIOS 開 PCIe bifurcation（x8/x8）。實測 00:01.1 與 00:01.3 的 LnkCap Width 都是 x8，證明分拆已生效。

每張 R9700 前面還掛著一顆 PCIe switch（1002:1478/1479）：上游對 CPU 是 x8，下游對 GPU die 是 x16，所以卡端 endpoint 讀到的是 Width x16，但真正的瓶頸帶寬是 CPU 側的 x8 Gen5（約 32 GB/s）。對 AI 推理來說完全夠——權重載入一次後就吃算力，不吃 host 頻寬。

第三張卡 RTX 3090 沒有 CPU lane 可用（16 條已被雙 R9700 佔滿），只能掛到 B850 晶片組那條 x4 Gen4 上行下面，和兩張 5GbE、Samsung PM9A1、Wi-Fi 7、USB、SATA 共享頻寬，因此協商成 x4。當遊戲 / CUDA 實驗卡用足夠，但別期待它有滿頻寬。

CPU 9950X3D — 28× PCIe 5.0 lanes
├── x8  Gen5 ── R9700 #1 (ASUS,       03:00) ┐
├── x8  Gen5 ── R9700 #2 (PowerColor, 07:00) ┘ ← 16 條顯卡 lane 拆成 8×8
├── x4  Gen5 ── Predator GM9 M.2  (Windows 碟)
├── x4  Gen4 ── Crucial T500 M.2  (PVE 系統碟)
└── x4  Gen4 ── B850 晶片組
                ├── RTX 3090 (0a:00, x4 downgraded)
                ├── RTL8126 5GbE ×2
                ├── Samsung PM9A1 NVMe (media)
                ├── RTL8922AE Wi-Fi 7
                └── USB / SATA

提醒：閒置時 link 會降到 2.5GT/s（ASPM 省電），例如 R9700 #2、RTX 3090 目前顯示 Gen1 x8/x4，這是正常降頻，跑推理 / 遊戲時會自動 train 回 Gen5 / Gen4。判斷「有沒有拆成 x8」要看 LnkCap Width，不是看即時 LnkSta Speed。

https://youtu.be/i7lbI_qO3Ww?si=Q9Xjcdy3q3g35UMf
PC B流出了

最近工作也在訓練寫作模型，光是乾淨的資料真的就很難找.....

OCuLink/USB4 為什麼不考慮走 m.2 方案？ 我整套拿下來4000台幣左右。
我用的是開源宇宙的顯卡屋＋ＡＤＴ OCuLink m.2 PCIE
散熱問題非常嚴重，我都很擔心哪一天燒起來
如果你機器本身是支持 OCuLink 那當然直接上 OCuLink
但如果你都有錢買 Framework Laptop 16 不如直接組一台新的洋垃圾....

@GH-Y 告訴你水冷完全沒意義ＸＤ
我目前的配置是 9950x3d + R9700 雙卡 ＋ RTX 3090
目前是阿薩辛 VC + 六顆貓頭鷹 溫度都可以壓在50~75 之間，當然還有一點是我辦公室白天冷氣都會開著

有時間折騰 WSL 都可以搞定好幾套 Linux 環境了.....
這東西只有當年 .net core 轉換陣痛期那段時間真的好用

最近買了一套 EPYC .....

@风飞 你對穩定性計算有要求，在你前面又說你的需求還不確定?
化学仿真运算相關的軟體有支援多GPU處理嗎？還是需要用到CPU加速卡?
穩定性真的要追求的話，你要考慮的東西不只是顯示卡，電源、機殼、網路環境環、空間也需要列入成本考量，還有電費/冷氣有沒有指標？
我並不覺得二手老卡不間斷運算會有問題，挖礦最常聽到的也都是電源導致的燒卡為主，
但如果你真的有這方面需求，應該直接看 PRO4000/4500 、 B70、R9700 這類型的工作站卡。
仅支持 PCIe3.0 通道這問題不大，問題只會在使用多張 AMD 卡進行推論，但你買3090 可以走 SLI 。
另外如果科研與學習用途其實是分開的並且預算有限，為什麼不考慮直接租借算力？

@566656661 想請問大大用哪一台小主機？

更各位大大們推薦 OCUlink 小主機

1. 我也不知道......
   2,找商業夥伴
   3.先租機器就好，用到再付錢