跳转至内容
  • 首页
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. 版块
  3. AI硬件
  4. 雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

雙 RX 7900 XTX + Ubuntu 24.04 + ROCm 6.3 實戰報告

已定时 已固定 已锁定 已移动 AI硬件
7900xtxrocmubuntu
29 帖子 13 发布者 2.1k 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • F fenky0304

    感謝您的無法分享!!! ^_^

    Chan IvanC 离线
    Chan IvanC 离线
    Chan Ivan
    技术大牛
    发表于 最后由 编辑
    #9

    @fenky0304 純粹為了興趣

    1 条回复 最后回复
    0
    • John AtoJ 离线
      John AtoJ 离线
      John Ato
      发表于 最后由 编辑
      #10

      --split-mode tensor,速度有明显提升,前提是cpu有双直连 pcie4.0x8通道
      52d84b32-ba2e-414d-9e63-31bbb4a7a7da-image.jpeg,
      681513cb-1617-4c4d-af14-689928ca770d-image.jpeg
      46b9861b-df1f-4ec4-b3e2-7060a67c604c-image.jpeg

      David ZhangD 1 条回复 最后回复
      2
      • John AtoJ 离线
        John AtoJ 离线
        John Ato
        发表于 最后由 编辑
        #11

        单卡是vulkan更快(其实也有点不稳定,尤其prefill),双卡肯定是rocm更稳

        1 条回复 最后回复
        0
        • S 离线
          S 离线
          stakira
          德高望重
          发表于 最后由 编辑
          #12

          rocm还是慢,我也把单卡7900 xtx移到了Linux机器上,rocm 只能跑到28,vulkan用自带驱动只有19,完全卸载驱动再安装官方驱动后vulkan稳定35。AMD驱动这个事还是挺讨厌的,实际上之前Windows上能跑到40上下。

          1 条回复 最后回复
          0
          • John AtoJ 离线
            John AtoJ 离线
            John Ato
            发表于 最后由 编辑
            #13

            Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

            S 1 条回复 最后回复
            0
            • John AtoJ John Ato

              --split-mode tensor,速度有明显提升,前提是cpu有双直连 pcie4.0x8通道
              52d84b32-ba2e-414d-9e63-31bbb4a7a7da-image.jpeg,
              681513cb-1617-4c4d-af14-689928ca770d-image.jpeg
              46b9861b-df1f-4ec4-b3e2-7060a67c604c-image.jpeg

              David ZhangD 离线
              David ZhangD 离线
              David Zhang
              技术大牛 劳动模范
              发表于 最后由 编辑
              #14

              @John-Ato 对,这数量级的decoding速度让人着迷。

              1 条回复 最后回复
              0
              • John AtoJ 离线
                John AtoJ 离线
                John Ato
                发表于 最后由 编辑
                #15
                此主題已被删除!
                1 条回复 最后回复
                0
                • John AtoJ 离线
                  John AtoJ 离线
                  John Ato
                  发表于 最后由 编辑
                  #16

                  是的,双卡7900xtx也蛮好用的,能跑Q8,mtp后速度起飞,而且上下文可以打满256k,这样的生产力还是挺迷人的,目前的方案就已经足够做产品了。前提是要自己组硬件,有一定动手能力。我喜欢听蓝宝石显卡全力运作后风扇的"滋滋"声。

                  1 条回复 最后回复
                  0
                  • John AtoJ John Ato

                    Qwen3.6-27B-UD-Q4_K_XL.gguf ,ubuntu24.04 vulkan 单卡 7900 xtx能到 50多的

                    S 离线
                    S 离线
                    stakira
                    德高望重
                    发表于 最后由 编辑
                    #17

                    @John-Ato 是开mtp还是不开?

                    1 条回复 最后回复
                    0
                    • John AtoJ 离线
                      John AtoJ 离线
                      John Ato
                      发表于 最后由 编辑
                      #18

                      mtp是必须要开的,然后用最新版本7.2.3rocm,自己编译最新版本llama.cpp

                      1 条回复 最后回复
                      0
                      • John AtoJ 离线
                        John AtoJ 离线
                        John Ato
                        发表于 最后由 编辑
                        #19

                        107204af-6081-40fe-b9de-9f6a76b45d48-image.jpeg,生产力相当可以了

                        1 条回复 最后回复
                        2
                        • terryT 在线
                          terryT 在线
                          terry
                          超级版主
                          发表于 最后由 编辑
                          #20

                          讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                          油管:https://www.youtube.com/@抡锤者

                          S 1 条回复 最后回复
                          0
                          • 系统 于 取消固定此主题
                          • 活 离线
                            活 离线
                            活着就是折腾
                            发表于 最后由 编辑
                            #21

                            用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                            Q mariaQ 1 条回复 最后回复
                            0
                            • terryT terry 于 将此主题固定
                            • terryT terry

                              讲实话,这个方案性价比极高,因为既可以大模型,又可以ComfyUI,生产力拉满了,关键是安静,蓝宝石的这个白金版我非常喜欢,做工绝对优秀,钱都花在了刀刃上。

                              S 离线
                              S 离线
                              stakira
                              德高望重
                              发表于 最后由 编辑
                              #22

                              @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                              terryT 1 条回复 最后回复
                              0
                              • S stakira

                                @terry 怎么感觉我的 ASRock Phantom Gaming Radeon RX 7900 XTX 动静巨大 😢

                                terryT 在线
                                terryT 在线
                                terry
                                超级版主
                                发表于 最后由 编辑
                                #23

                                @stakira 我的是蓝宝石,我的卡声音完全不及CPU风扇,视频里说了很多次了,大家买蓝宝石。

                                油管:https://www.youtube.com/@抡锤者

                                1 条回复 最后回复
                                2
                                • 系统 于 取消固定此主题
                                • 活 活着就是折腾

                                  用的啥电源,双卡要6个8pin插头我的电源才4个,难受啊

                                  Q mariaQ 离线
                                  Q mariaQ 离线
                                  Q maria
                                  劳动模范 技术大牛
                                  发表于 最后由 编辑
                                  #24

                                  @活着就是折腾
                                  我也好奇。。这得1300w吧

                                  williamlouisW 1 条回复 最后回复
                                  0
                                  • K 离线
                                    K 离线
                                    koala
                                    德高望重 劳动模范
                                    发表于 最后由 编辑
                                    #25

                                    不知道我理解的对不对,这样设置双卡,也可以在这个服务器上跑爱马仕,然后让爱马仕控制另外一张卡跑ComfyUI?

                                    1 条回复 最后回复
                                    0
                                    • Q mariaQ Q maria

                                      @活着就是折腾
                                      我也好奇。。这得1300w吧

                                      williamlouisW 离线
                                      williamlouisW 离线
                                      williamlouis
                                      超级版主
                                      发表于 最后由 编辑
                                      #26

                                      @Q-maria 1200W可以。1300W 稳定。1300是推荐值。供电配件 越稳定越好。而且更省电。不是大电源就会更费点。

                                      个人主页:xlkj.org Telegram https://t.me/xlkjorg

                                      1 条回复 最后回复
                                      0
                                      • Chan IvanC Chan Ivan

                                        photo_2026-05-18_11-39-50.jpg photo_2026-05-18_11-39-44.jpg photo_2026-05-18_11-39-30.jpg

                                        硬件:

                                        • 主板:HUANANZHI X99-CD3 GAMING(X99)
                                        • CPU:Xeon E5-2666 v3(10C/20T)
                                        • RAM:128GB DDR3 ECC @ 1600
                                        • GPU:2× RX 7900 XTX(PULSE,各 24GB)
                                        • 儲存:NVMe 1.9TB(Win + Ubuntu + Shared)
                                        • OS:Ubuntu 24.04.4 / kernel 6.17.0

                                        軟件:

                                        • ROCm 6.3 / Python 3.12.3
                                        • llama.cpp b9198(自編譯 ROCm)
                                        • ComfyUI + ComfyUI-Manager
                                        • Shell scripts 管理全部操作(~/bin/)

                                        LLM Benchmark(Qwen3.6-27B Q4_K_M):

                                        單卡

                                        • 配置: 單卡

                                        • Context: 8K

                                        • Token Gen: 27.2 t/s

                                        單卡

                                        • 配置: 單卡

                                        • Context: 128K

                                        • Token Gen: 27.0 t/s

                                        雙卡 tensor-split

                                        • 配置: 雙卡 tensor-split

                                        • Context: 8K

                                        • Token Gen: 19.8 t/s

                                        雙卡 tensor-split

                                        • 配置: 雙卡 tensor-split

                                        • Context: 128K

                                        • Token Gen: 21.4 t/s

                                        → 單卡打贏雙卡 tensor-split!27B Q4_K_M fit 入 24GB VRAM 單卡已經最快。雙卡只係 >64K context 先用得著。

                                        投機解碼:
                                        Qwen3.6 用 M-RoPE,同 llama.cpp 投機解碼唔相容(全部 spec type 失敗,accept rate < 13%)。Skip,27 t/s 已經夠快。

                                        ComfyUI 雙 Instance:
                                        兩張卡各一個獨立 ComfyUI(port 8188/8189),systemd 管理自動開機。

                                        Flux.1 dev:78.9s(雙 instance)vs 73.4s(tensor-split)
                                        LTX Video:13.5s(雙 instance)vs 22.9s(tensor-split)

                                        → 雙 instance 整體完勝,尤其 LTX 快接近一倍,仲可以同時跑兩個 workflow。

                                        ROCm 6.3 tips:

                                        • 記得 delete blacklist-amdgpu.conf
                                        • 唔使 HSA_OVERRIDE_GFX_VERSION(gfx1100 原生支援)
                                        • tensor-split 用 --tensor-split 24,24(absolute GiB)
                                        • ROCm 6.3 對 RX 7900 XTX 支援完善
                                        C 离线
                                        C 离线
                                        Colt
                                        德高望重
                                        发表于 最后由 编辑
                                        #27

                                        @Chan-Ivan 请问楼主,散热有没有问题啊?看图两张7900XTX之间还有多少空间?

                                        1 条回复 最后回复
                                        0
                                        • 潘旭高潘 离线
                                          潘旭高潘 离线
                                          潘旭高
                                          发表于 最后由 编辑
                                          #28

                                          双卡紧贴,涡轮卡还好,非公开放散热(PULSE 是三风扇开放式),上下叠放上面那张会吸热风,E5-2666 v3 只有 40 条 PCIe 3.0,第一张卡 x16,第二张只有 x8 甚至 x4(看具体板子布局)。双卡跑大模型推理时带宽会成为小瓶颈,但对于推理影响有限

                                          1 条回复 最后回复
                                          0

                                          你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                          厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                                          有了你的建议,这篇帖子会更精彩哦 💗

                                          注册 登录
                                          回复
                                          • 在新帖中回复
                                          登录后回复
                                          • 从旧到新
                                          • 从新到旧
                                          • 最多赞同


                                          • 登录

                                          • 没有帐号? 注册

                                          • 登录或注册以进行搜索。
                                          • 第一个帖子
                                            最后一个帖子
                                          0
                                          • 首页
                                          • 版块
                                          • 最新
                                          • 标签
                                          • 热门
                                          • 用户
                                          • 群组