跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. 雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

已定时 已固定 已锁定 已移动 AI硬件
29 帖子 13 发布者 1.9k 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • S 离线
    S 离线
    stakira
    德高望重
    发表于 最后由 编辑
    #12

    rocm还是慢,我也把单卡7900 xtx移到了Linux机器上,rocm 只能跑到28,vulkan用自带驱动只有19,完全卸载驱动再安装官方驱动后vulkan稳定35。AMD驱动这个事还是挺讨厌的,实际上之前Windows上能跑到40上下。

    1 条回复 最后回复
    0
    • John AtoJ 离线
      John AtoJ 离线
      John Ato
      发表于 最后由 编辑
      #13

      Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

      S 1 条回复 最后回复
      0
      • John AtoJ John Ato

        --split-mode tensor,速度有明显提升,前提是cpu有双直连 pcie4.0x8通道
        52d84b32-ba2e-414d-9e63-31bbb4a7a7da-image.jpeg,
        681513cb-1617-4c4d-af14-689928ca770d-image.jpeg
        46b9861b-df1f-4ec4-b3e2-7060a67c604c-image.jpeg

        David ZhangD 离线
        David ZhangD 离线
        David Zhang
        技术大牛 劳动模范
        发表于 最后由 编辑
        #14

        @John-Ato 对,这数量级的decoding速度让人着迷。

        1 条回复 最后回复
        0
        • John AtoJ 离线
          John AtoJ 离线
          John Ato
          发表于 最后由 编辑
          #15
          此主題已被删除!
          1 条回复 最后回复
          0
          • John AtoJ 离线
            John AtoJ 离线
            John Ato
            发表于 最后由 编辑
            #16

            是的,双卡7900xtx也蛮好用的,能跑Q8,mtp后速度起飞,而且上下文可以打满256k,这样的生产力还是挺迷人的,目前的方案就已经足够做产品了。前提是要自己组硬件,有一定动手能力。我喜欢听蓝宝石显卡全力运作后风扇的"滋滋"声。

            1 条回复 最后回复
            0
            • John AtoJ John Ato

              Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

              S 离线
              S 离线
              stakira
              德高望重
              发表于 最后由 编辑
              #17

              @John-Ato 是开mtp还是不开?

              1 条回复 最后回复
              0
              • John AtoJ 离线
                John AtoJ 离线
                John Ato
                发表于 最后由 编辑
                #18

                mtp是必须要开的,然后用最新版本7.2.3rocm,自己编译最新版本llama.cpp

                1 条回复 最后回复
                0
                • John AtoJ 离线
                  John AtoJ 离线
                  John Ato
                  发表于 最后由 编辑
                  #19

                  107204af-6081-40fe-b9de-9f6a76b45d48-image.jpeg,生产力相当可以了

                  1 条回复 最后回复
                  2
                  • terryT 离线
                    terryT 离线
                    terry
                    超级版主
                    发表于 最后由 编辑
                    #20

                    讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                    油管:https://www.youtube.com/@抡锤者

                    S 1 条回复 最后回复
                    0
                    • 系统 于 取消固定此主题
                    • 活 离线
                      活 离线
                      活着就是折腾
                      发表于 最后由 编辑
                      #21

                      用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                      Q mariaQ 1 条回复 最后回复
                      0
                      • terryT terry 于 将此主题固定
                      • terryT terry

                        讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                        S 离线
                        S 离线
                        stakira
                        德高望重
                        发表于 最后由 编辑
                        #22

                        @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                        terryT 1 条回复 最后回复
                        0
                        • S stakira

                          @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                          terryT 离线
                          terryT 离线
                          terry
                          超级版主
                          发表于 最后由 编辑
                          #23

                          @stakira 我的是蓝宝石,我的卡声音完全不及CPU风扇,视频里说了很多次了,大家买蓝宝石。

                          油管:https://www.youtube.com/@抡锤者

                          1 条回复 最后回复
                          2
                          • 系统 于 取消固定此主题
                          • 活 活着就是折腾

                            用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                            Q mariaQ 离线
                            Q mariaQ 离线
                            Q maria
                            德高望重 劳动模范
                            编写于 最后由 编辑
                            #24

                            @活着就是折腾
                            我也好奇。。这得1300w吧

                            williamlouisW 1 条回复 最后回复
                            0
                            • K 离线
                              K 离线
                              koala
                              编写于 最后由 编辑
                              #25

                              不知道我理解的对不对,这样设置双卡,也可以在这个服务器上跑爱马仕,然后让爱马仕控制另外一张卡跑ComfyUI?

                              1 条回复 最后回复
                              0
                              • Q mariaQ Q maria

                                @活着就是折腾
                                我也好奇。。这得1300w吧

                                williamlouisW 离线
                                williamlouisW 离线
                                williamlouis
                                超级版主
                                编写于 最后由 编辑
                                #26

                                @Q-maria 1200W可以。1300W 稳定。1300是推荐值。供电配件 越稳定越好。而且更省电。不是大电源就会更费点。

                                个人主页:xlkj.org Telegram https://t.me/xlkjorg

                                1 条回复 最后回复
                                0
                                • Chan IvanC Chan Ivan

                                  photo_2026-05-18_11-39-50.jpg photo_2026-05-18_11-39-44.jpg photo_2026-05-18_11-39-30.jpg

                                  硬件:

                                  • 主板:HUANANZHI X99-CD3 GAMING(X99)
                                  • CPU:Xeon E5-2666 v3(10C/20T)
                                  • RAM:128GB DDR3 ECC @ 1600
                                  • GPU:2× RX 7900 XTX(PULSE,各 24GB)
                                  • 儲存:NVMe 1.9TB(Win + Ubuntu + Shared)
                                  • OS:Ubuntu 24.04.4 / kernel 6.17.0

                                  軟件:

                                  • ROCm 6.3 / Python 3.12.3
                                  • llama.cpp b9198(自編譯 ROCm)
                                  • ComfyUI + ComfyUI-Manager
                                  • Shell scripts 管理全部操作(~/bin/)

                                  LLM Benchmark(Qwen3.6-27B Q4_K_M):

                                  單卡

                                  • 配置: 單卡

                                  • Context: 8K

                                  • Token Gen: 27.2 t/s

                                  單卡

                                  • 配置: 單卡

                                  • Context: 128K

                                  • Token Gen: 27.0 t/s

                                  雙卡 tensor-split

                                  • 配置: 雙卡 tensor-split

                                  • Context: 8K

                                  • Token Gen: 19.8 t/s

                                  雙卡 tensor-split

                                  • 配置: 雙卡 tensor-split

                                  • Context: 128K

                                  • Token Gen: 21.4 t/s

                                  → 單卡打贏雙卡 tensor-split!27B Q4_K_M fit 入 24GB VRAM 單卡已經最快。雙卡只係 >64K context 先用得著。

                                  投機解碼:
                                  Qwen3.6 用 M-RoPE,同 llama.cpp 投機解碼唔相容(全部 spec type 失敗,accept rate < 13%)。Skip,27 t/s 已經夠快。

                                  ComfyUI 雙 Instance:
                                  兩張卡各一個獨立 ComfyUI(port 8188/8189),systemd 管理自動開機。

                                  Flux.1 dev:78.9s(雙 instance)vs 73.4s(tensor-split)
                                  LTX Video:13.5s(雙 instance)vs 22.9s(tensor-split)

                                  → 雙 instance 整體完勝,尤其 LTX 快接近一倍,仲可以同時跑兩個 workflow。

                                  ROCm 6.3 tips:

                                  • 記得 delete blacklist-amdgpu.conf
                                  • 唔使 HSA_OVERRIDE_GFX_VERSION(gfx1100 原生支援)
                                  • tensor-split 用 --tensor-split 24,24(absolute GiB)
                                  • ROCm 6.3 對 RX 7900 XTX 支援完善
                                  C 离线
                                  C 离线
                                  Colt
                                  编写于 最后由 编辑
                                  #27

                                  @Chan-Ivan 请问楼主,散热有没有问题啊?看图两张7900XTX之间还有多少空间?

                                  1 条回复 最后回复
                                  0
                                  • 潘旭高潘 离线
                                    潘旭高潘 离线
                                    潘旭高
                                    编写于 最后由 编辑
                                    #28

                                    双卡紧贴,涡轮卡还好,非公开放散热(PULSE 是三风扇开放式),上下叠放上面那张会吸热风,E5-2666 v3 只有 40 条 PCIe 3.0,第一张卡 x16,第二张只有 x8 甚至 x4(看具体板子布局)。双卡跑大模型推理时带宽会成为小瓶颈,但对于推理影响有限

                                    1 条回复 最后回复
                                    0
                                    • 拐 离线
                                      拐 离线
                                      拐子001
                                      编写于 最后由 拐子001 编辑
                                      #29

                                      不知道双路的x99会不会在pic通道上会好一些呢。

                                      1 条回复 最后回复
                                      0

                                      你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                      厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                                      有了你的建议,这篇帖子会更精彩哦 💗

                                      注册 登录
                                      回复
                                      • 在新帖中回复
                                      登录后回复
                                      • 从旧到新
                                      • 从新到旧
                                      • 最多赞同


                                      • 登录

                                      • 没有帐号? 注册

                                      • 第一个帖子
                                        最后一个帖子
                                      0
                                      • 版块
                                      • 最新
                                      • 标签
                                      • 热门
                                      • 用户
                                      • 群组