跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. 雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

已定时 已固定 已锁定 已移动 AI硬件
29 帖子 13 发布者 1.9k 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • John AtoJ John Ato

    --split-mode tensor,速度有明显提升,前提是cpu有双直连 pcie4.0x8通道
    52d84b32-ba2e-414d-9e63-31bbb4a7a7da-image.jpeg,
    681513cb-1617-4c4d-af14-689928ca770d-image.jpeg
    46b9861b-df1f-4ec4-b3e2-7060a67c604c-image.jpeg

    David ZhangD 离线
    David ZhangD 离线
    David Zhang
    技术大牛 劳动模范
    发表于 最后由 编辑
    #14

    @John-Ato 对,这数量级的decoding速度让人着迷。

    1 条回复 最后回复
    0
    • John AtoJ 离线
      John AtoJ 离线
      John Ato
      发表于 最后由 编辑
      #15
      此主題已被删除!
      1 条回复 最后回复
      0
      • John AtoJ 离线
        John AtoJ 离线
        John Ato
        发表于 最后由 编辑
        #16

        是的,双卡7900xtx也蛮好用的,能跑Q8,mtp后速度起飞,而且上下文可以打满256k,这样的生产力还是挺迷人的,目前的方案就已经足够做产品了。前提是要自己组硬件,有一定动手能力。我喜欢听蓝宝石显卡全力运作后风扇的"滋滋"声。

        1 条回复 最后回复
        0
        • John AtoJ John Ato

          Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

          S 离线
          S 离线
          stakira
          德高望重
          发表于 最后由 编辑
          #17

          @John-Ato 是开mtp还是不开?

          1 条回复 最后回复
          0
          • John AtoJ 离线
            John AtoJ 离线
            John Ato
            发表于 最后由 编辑
            #18

            mtp是必须要开的,然后用最新版本7.2.3rocm,自己编译最新版本llama.cpp

            1 条回复 最后回复
            0
            • John AtoJ 离线
              John AtoJ 离线
              John Ato
              发表于 最后由 编辑
              #19

              107204af-6081-40fe-b9de-9f6a76b45d48-image.jpeg,生产力相当可以了

              1 条回复 最后回复
              2
              • terryT 离线
                terryT 离线
                terry
                超级版主
                发表于 最后由 编辑
                #20

                讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                油管:https://www.youtube.com/@抡锤者

                S 1 条回复 最后回复
                0
                • 系统 于 取消固定此主题
                • 活 离线
                  活 离线
                  活着就是折腾
                  发表于 最后由 编辑
                  #21

                  用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                  Q mariaQ 1 条回复 最后回复
                  0
                  • terryT terry 于 将此主题固定
                  • terryT terry

                    讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                    S 离线
                    S 离线
                    stakira
                    德高望重
                    发表于 最后由 编辑
                    #22

                    @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                    terryT 1 条回复 最后回复
                    0
                    • S stakira

                      @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                      terryT 离线
                      terryT 离线
                      terry
                      超级版主
                      发表于 最后由 编辑
                      #23

                      @stakira 我的是蓝宝石,我的卡声音完全不及CPU风扇,视频里说了很多次了,大家买蓝宝石。

                      油管:https://www.youtube.com/@抡锤者

                      1 条回复 最后回复
                      2
                      • 系统 于 取消固定此主题
                      • 活 活着就是折腾

                        用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                        Q mariaQ 离线
                        Q mariaQ 离线
                        Q maria
                        德高望重 劳动模范
                        编写于 最后由 编辑
                        #24

                        @活着就是折腾
                        我也好奇。。这得1300w吧

                        williamlouisW 1 条回复 最后回复
                        0
                        • K 离线
                          K 离线
                          koala
                          编写于 最后由 编辑
                          #25

                          不知道我理解的对不对,这样设置双卡,也可以在这个服务器上跑爱马仕,然后让爱马仕控制另外一张卡跑ComfyUI?

                          1 条回复 最后回复
                          0
                          • Q mariaQ Q maria

                            @活着就是折腾
                            我也好奇。。这得1300w吧

                            williamlouisW 离线
                            williamlouisW 离线
                            williamlouis
                            超级版主
                            编写于 最后由 编辑
                            #26

                            @Q-maria 1200W可以。1300W 稳定。1300是推荐值。供电配件 越稳定越好。而且更省电。不是大电源就会更费点。

                            个人主页:xlkj.org Telegram https://t.me/xlkjorg

                            1 条回复 最后回复
                            0
                            • Chan IvanC Chan Ivan

                              photo_2026-05-18_11-39-50.jpg photo_2026-05-18_11-39-44.jpg photo_2026-05-18_11-39-30.jpg

                              硬件:

                              • 主板:HUANANZHI X99-CD3 GAMING(X99)
                              • CPU:Xeon E5-2666 v3(10C/20T)
                              • RAM:128GB DDR3 ECC @ 1600
                              • GPU:2× RX 7900 XTX(PULSE,各 24GB)
                              • 儲存:NVMe 1.9TB(Win + Ubuntu + Shared)
                              • OS:Ubuntu 24.04.4 / kernel 6.17.0

                              軟件:

                              • ROCm 6.3 / Python 3.12.3
                              • llama.cpp b9198(自編譯 ROCm)
                              • ComfyUI + ComfyUI-Manager
                              • Shell scripts 管理全部操作(~/bin/)

                              LLM Benchmark(Qwen3.6-27B Q4_K_M):

                              單卡

                              • 配置: 單卡

                              • Context: 8K

                              • Token Gen: 27.2 t/s

                              單卡

                              • 配置: 單卡

                              • Context: 128K

                              • Token Gen: 27.0 t/s

                              雙卡 tensor-split

                              • 配置: 雙卡 tensor-split

                              • Context: 8K

                              • Token Gen: 19.8 t/s

                              雙卡 tensor-split

                              • 配置: 雙卡 tensor-split

                              • Context: 128K

                              • Token Gen: 21.4 t/s

                              → 單卡打贏雙卡 tensor-split!27B Q4_K_M fit 入 24GB VRAM 單卡已經最快。雙卡只係 >64K context 先用得著。

                              投機解碼:
                              Qwen3.6 用 M-RoPE,同 llama.cpp 投機解碼唔相容(全部 spec type 失敗,accept rate < 13%)。Skip,27 t/s 已經夠快。

                              ComfyUI 雙 Instance:
                              兩張卡各一個獨立 ComfyUI(port 8188/8189),systemd 管理自動開機。

                              Flux.1 dev:78.9s(雙 instance)vs 73.4s(tensor-split)
                              LTX Video:13.5s(雙 instance)vs 22.9s(tensor-split)

                              → 雙 instance 整體完勝,尤其 LTX 快接近一倍,仲可以同時跑兩個 workflow。

                              ROCm 6.3 tips:

                              • 記得 delete blacklist-amdgpu.conf
                              • 唔使 HSA_OVERRIDE_GFX_VERSION(gfx1100 原生支援)
                              • tensor-split 用 --tensor-split 24,24(absolute GiB)
                              • ROCm 6.3 對 RX 7900 XTX 支援完善
                              C 离线
                              C 离线
                              Colt
                              编写于 最后由 编辑
                              #27

                              @Chan-Ivan 请问楼主,散热有没有问题啊?看图两张7900XTX之间还有多少空间?

                              1 条回复 最后回复
                              0
                              • 潘旭高潘 离线
                                潘旭高潘 离线
                                潘旭高
                                编写于 最后由 编辑
                                #28

                                双卡紧贴,涡轮卡还好,非公开放散热(PULSE 是三风扇开放式),上下叠放上面那张会吸热风,E5-2666 v3 只有 40 条 PCIe 3.0,第一张卡 x16,第二张只有 x8 甚至 x4(看具体板子布局)。双卡跑大模型推理时带宽会成为小瓶颈,但对于推理影响有限

                                1 条回复 最后回复
                                0
                                • 拐 离线
                                  拐 离线
                                  拐子001
                                  编写于 最后由 拐子001 编辑
                                  #29

                                  不知道双路的x99会不会在pic通道上会好一些呢。

                                  1 条回复 最后回复
                                  0

                                  你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                  厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                                  有了你的建议,这篇帖子会更精彩哦 💗

                                  注册 登录
                                  回复
                                  • 在新帖中回复
                                  登录后回复
                                  • 从旧到新
                                  • 从新到旧
                                  • 最多赞同


                                  • 登录

                                  • 没有帐号? 注册

                                  • 第一个帖子
                                    最后一个帖子
                                  0
                                  • 版块
                                  • 最新
                                  • 标签
                                  • 热门
                                  • 用户
                                  • 群组