跳转至内容
  • 首页
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. 版块
  3. AI硬件
  4. 雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

已定时 已固定 已锁定 已移动 AI硬件
7900xtxrocmubuntu
29 帖子 13 发布者 2.1k 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • John AtoJ 离线
    John AtoJ 离线
    John Ato
    发表于 最后由 编辑
    #10

    --split-mode tensor,速度有明显提升,前提是cpu有双直连 pcie4.0x8通道
    52d84b32-ba2e-414d-9e63-31bbb4a7a7da-image.jpeg,
    681513cb-1617-4c4d-af14-689928ca770d-image.jpeg
    46b9861b-df1f-4ec4-b3e2-7060a67c604c-image.jpeg

    David ZhangD 1 条回复 最后回复
    2
    • John AtoJ 离线
      John AtoJ 离线
      John Ato
      发表于 最后由 编辑
      #11

      单卡是vulkan更快(其实也有点不稳定,尤其prefill),双卡肯定是rocm更稳

      1 条回复 最后回复
      0
      • S 离线
        S 离线
        stakira
        德高望重
        发表于 最后由 编辑
        #12

        rocm还是慢,我也把单卡7900 xtx移到了Linux机器上,rocm 只能跑到28,vulkan用自带驱动只有19,完全卸载驱动再安装官方驱动后vulkan稳定35。AMD驱动这个事还是挺讨厌的,实际上之前Windows上能跑到40上下。

        1 条回复 最后回复
        0
        • John AtoJ 离线
          John AtoJ 离线
          John Ato
          发表于 最后由 编辑
          #13

          Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

          S 1 条回复 最后回复
          0
          • John AtoJ John Ato

            --split-mode tensor,速度有明显提升,前提是cpu有双直连 pcie4.0x8通道
            52d84b32-ba2e-414d-9e63-31bbb4a7a7da-image.jpeg,
            681513cb-1617-4c4d-af14-689928ca770d-image.jpeg
            46b9861b-df1f-4ec4-b3e2-7060a67c604c-image.jpeg

            David ZhangD 离线
            David ZhangD 离线
            David Zhang
            技术大牛 劳动模范
            发表于 最后由 编辑
            #14

            @John-Ato 对,这数量级的decoding速度让人着迷。

            1 条回复 最后回复
            0
            • John AtoJ 离线
              John AtoJ 离线
              John Ato
              发表于 最后由 编辑
              #15
              此主題已被删除!
              1 条回复 最后回复
              0
              • John AtoJ 离线
                John AtoJ 离线
                John Ato
                发表于 最后由 编辑
                #16

                是的,双卡7900xtx也蛮好用的,能跑Q8,mtp后速度起飞,而且上下文可以打满256k,这样的生产力还是挺迷人的,目前的方案就已经足够做产品了。前提是要自己组硬件,有一定动手能力。我喜欢听蓝宝石显卡全力运作后风扇的"滋滋"声。

                1 条回复 最后回复
                0
                • John AtoJ John Ato

                  Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

                  S 离线
                  S 离线
                  stakira
                  德高望重
                  发表于 最后由 编辑
                  #17

                  @John-Ato 是开mtp还是不开?

                  1 条回复 最后回复
                  0
                  • John AtoJ 离线
                    John AtoJ 离线
                    John Ato
                    发表于 最后由 编辑
                    #18

                    mtp是必须要开的,然后用最新版本7.2.3rocm,自己编译最新版本llama.cpp

                    1 条回复 最后回复
                    0
                    • John AtoJ 离线
                      John AtoJ 离线
                      John Ato
                      发表于 最后由 编辑
                      #19

                      107204af-6081-40fe-b9de-9f6a76b45d48-image.jpeg,生产力相当可以了

                      1 条回复 最后回复
                      2
                      • terryT 在线
                        terryT 在线
                        terry
                        超级版主
                        发表于 最后由 编辑
                        #20

                        讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                        油管:https://www.youtube.com/@抡锤者

                        S 1 条回复 最后回复
                        0
                        • 系统 于 取消固定此主题
                        • 活 离线
                          活 离线
                          活着就是折腾
                          发表于 最后由 编辑
                          #21

                          用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                          Q mariaQ 1 条回复 最后回复
                          0
                          • terryT terry 于 将此主题固定
                          • terryT terry

                            讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                            S 离线
                            S 离线
                            stakira
                            德高望重
                            发表于 最后由 编辑
                            #22

                            @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                            terryT 1 条回复 最后回复
                            0
                            • S stakira

                              @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                              terryT 在线
                              terryT 在线
                              terry
                              超级版主
                              发表于 最后由 编辑
                              #23

                              @stakira 我的是蓝宝石,我的卡声音完全不及CPU风扇,视频里说了很多次了,大家买蓝宝石。

                              油管:https://www.youtube.com/@抡锤者

                              1 条回复 最后回复
                              2
                              • 系统 于 取消固定此主题
                              • 活 活着就是折腾

                                用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                                Q mariaQ 离线
                                Q mariaQ 离线
                                Q maria
                                劳动模范 技术大牛
                                发表于 最后由 编辑
                                #24

                                @活着就是折腾
                                我也好奇。。这得1300w吧

                                williamlouisW 1 条回复 最后回复
                                0
                                • K 离线
                                  K 离线
                                  koala
                                  德高望重 劳动模范
                                  发表于 最后由 编辑
                                  #25

                                  不知道我理解的对不对,这样设置双卡,也可以在这个服务器上跑爱马仕,然后让爱马仕控制另外一张卡跑ComfyUI?

                                  1 条回复 最后回复
                                  0
                                  • Q mariaQ Q maria

                                    @活着就是折腾
                                    我也好奇。。这得1300w吧

                                    williamlouisW 离线
                                    williamlouisW 离线
                                    williamlouis
                                    超级版主
                                    发表于 最后由 编辑
                                    #26

                                    @Q-maria 1200W可以。1300W 稳定。1300是推荐值。供电配件 越稳定越好。而且更省电。不是大电源就会更费点。

                                    个人主页:xlkj.org Telegram https://t.me/xlkjorg

                                    1 条回复 最后回复
                                    0
                                    • Chan IvanC Chan Ivan

                                      photo_2026-05-18_11-39-50.jpg photo_2026-05-18_11-39-44.jpg photo_2026-05-18_11-39-30.jpg

                                      硬件:

                                      • 主板:HUANANZHI X99-CD3 GAMING(X99)
                                      • CPU:Xeon E5-2666 v3(10C/20T)
                                      • RAM:128GB DDR3 ECC @ 1600
                                      • GPU:2× RX 7900 XTX(PULSE,各 24GB)
                                      • 儲存:NVMe 1.9TB(Win + Ubuntu + Shared)
                                      • OS:Ubuntu 24.04.4 / kernel 6.17.0

                                      軟件:

                                      • ROCm 6.3 / Python 3.12.3
                                      • llama.cpp b9198(自編譯 ROCm)
                                      • ComfyUI + ComfyUI-Manager
                                      • Shell scripts 管理全部操作(~/bin/)

                                      LLM Benchmark(Qwen3.6-27B Q4_K_M):

                                      單卡

                                      • 配置: 單卡

                                      • Context: 8K

                                      • Token Gen: 27.2 t/s

                                      單卡

                                      • 配置: 單卡

                                      • Context: 128K

                                      • Token Gen: 27.0 t/s

                                      雙卡 tensor-split

                                      • 配置: 雙卡 tensor-split

                                      • Context: 8K

                                      • Token Gen: 19.8 t/s

                                      雙卡 tensor-split

                                      • 配置: 雙卡 tensor-split

                                      • Context: 128K

                                      • Token Gen: 21.4 t/s

                                      → 單卡打贏雙卡 tensor-split!27B Q4_K_M fit 入 24GB VRAM 單卡已經最快。雙卡只係 >64K context 先用得著。

                                      投機解碼:
                                      Qwen3.6 用 M-RoPE,同 llama.cpp 投機解碼唔相容(全部 spec type 失敗,accept rate < 13%)。Skip,27 t/s 已經夠快。

                                      ComfyUI 雙 Instance:
                                      兩張卡各一個獨立 ComfyUI(port 8188/8189),systemd 管理自動開機。

                                      Flux.1 dev:78.9s(雙 instance)vs 73.4s(tensor-split)
                                      LTX Video:13.5s(雙 instance)vs 22.9s(tensor-split)

                                      → 雙 instance 整體完勝,尤其 LTX 快接近一倍,仲可以同時跑兩個 workflow。

                                      ROCm 6.3 tips:

                                      • 記得 delete blacklist-amdgpu.conf
                                      • 唔使 HSA_OVERRIDE_GFX_VERSION(gfx1100 原生支援)
                                      • tensor-split 用 --tensor-split 24,24(absolute GiB)
                                      • ROCm 6.3 對 RX 7900 XTX 支援完善
                                      C 离线
                                      C 离线
                                      Colt
                                      德高望重
                                      发表于 最后由 编辑
                                      #27

                                      @Chan-Ivan 请问楼主,散热有没有问题啊?看图两张7900XTX之间还有多少空间?

                                      1 条回复 最后回复
                                      0
                                      • 潘旭高潘 离线
                                        潘旭高潘 离线
                                        潘旭高
                                        发表于 最后由 编辑
                                        #28

                                        双卡紧贴,涡轮卡还好,非公开放散热(PULSE 是三风扇开放式),上下叠放上面那张会吸热风,E5-2666 v3 只有 40 条 PCIe 3.0,第一张卡 x16,第二张只有 x8 甚至 x4(看具体板子布局)。双卡跑大模型推理时带宽会成为小瓶颈,但对于推理影响有限

                                        1 条回复 最后回复
                                        0
                                        • 拐 离线
                                          拐 离线
                                          拐子001
                                          发表于 最后由 拐子001 编辑
                                          #29

                                          不知道双路的x99会不会在pic通道上会好一些呢。

                                          1 条回复 最后回复
                                          0

                                          你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                          厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                                          有了你的建议,这篇帖子会更精彩哦 💗

                                          注册 登录
                                          回复
                                          • 在新帖中回复
                                          登录后回复
                                          • 从旧到新
                                          • 从新到旧
                                          • 最多赞同


                                          • 登录

                                          • 没有帐号? 注册

                                          • 登录或注册以进行搜索。
                                          • 第一个帖子
                                            最后一个帖子
                                          0
                                          • 首页
                                          • 版块
                                          • 最新
                                          • 标签
                                          • 热门
                                          • 用户
                                          • 群组