跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. 求助!OCuLink/USB4 + 7900 XTX跑AI推理的实际表现如何?有没有用过的老哥说说大坑?

求助!OCuLink/USB4 + 7900 XTX跑AI推理的实际表现如何?有没有用过的老哥说说大坑?

已定时 已固定 已锁定 已移动 AI硬件
7900xtx
13 帖子 8 发布者 433 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • A 离线
    A 离线
    abaalei
    超凡大师
    编写于 最后由 编辑
    #4

    7900xtx跑LLM 还是不错的,详情可以看看我的折腾实录

    1 条回复 最后回复
    1
    • terryT 离线
      terryT 离线
      terry
      超级版主
      编写于 最后由 编辑
      #5

      不建议使用显卡坞,显卡坞的价格可以买一x99洋垃圾了,为什么要买显卡坞,差的显卡坞用起来各种糟心,xtx性能不错,我用显卡坞的经历就是不好用:

      7900xtx戴尔笔记本显卡坞.jpeg

      油管:https://www.youtube.com/@抡锤者

      hanyoudH 1 条回复 最后回复
      2
      • CS6C 离线
        CS6C 离线
        CS6
        技术大牛 劳动模范
        编写于 最后由 编辑
        #6

        OCuLink/USB4 為什麼不考慮走 m.2 方案? 我整套拿下來4000台幣左右。
        我用的是開源宇宙的顯卡屋+ADT OCuLink m.2 PCIE
        散熱問題非常嚴重,我都很擔心哪一天燒起來
        如果你機器本身是支持 OCuLink 那當然直接上 OCuLink
        但如果你都有錢買 Framework Laptop 16 不如直接組一台新的洋垃圾....

        1 条回复 最后回复
        3
        • D 离线
          D 离线
          densha
          编写于 最后由 densha 编辑
          #7

          小弟自從接觸了老特說開始對本地AI萌生興趣,因為公司網路限制很多,封鎖大部分的AI domain,而且就算找到可以連的雲端AI,使用幾個小時下班前DLP告警就噴了幾百筆,嚇的我不敢再用,然後就腦筋就動到外接這招。

          最近從淘寶買了一組需要自己DIY組裝的顯卡塢,連接方案我挑的是SlimSAS轉接卡不是常見的OCuLink/雷電,因為我們公司就是很常見的品牌套機,這些接口不存在的,本身就重加上電源供應器、7900XTX整組拎去公司簡直像舉啞鈴重訓一樣😂

          費了一番力氣組裝好,裝好最新amd驅動,打開 GPUZ,有跑滿i5-9500世代的PCIE 3.0x16,實際表現因為才體驗一個多小時還沒有測太多,掛Qwen3.6-27b-Q4_K_M,文字推理一秒可以噴4x-5xT/s,個人覺得滿意,終於可以開始享受上班玩本地AI了。

          terryT 1 条回复 最后回复
          1
          • D densha

            小弟自從接觸了老特說開始對本地AI萌生興趣,因為公司網路限制很多,封鎖大部分的AI domain,而且就算找到可以連的雲端AI,使用幾個小時下班前DLP告警就噴了幾百筆,嚇的我不敢再用,然後就腦筋就動到外接這招。

            最近從淘寶買了一組需要自己DIY組裝的顯卡塢,連接方案我挑的是SlimSAS轉接卡不是常見的OCuLink/雷電,因為我們公司就是很常見的品牌套機,這些接口不存在的,本身就重加上電源供應器、7900XTX整組拎去公司簡直像舉啞鈴重訓一樣😂

            費了一番力氣組裝好,裝好最新amd驅動,打開 GPUZ,有跑滿i5-9500世代的PCIE 3.0x16,實際表現因為才體驗一個多小時還沒有測太多,掛Qwen3.6-27b-Q4_K_M,文字推理一秒可以噴4x-5xT/s,個人覺得滿意,終於可以開始享受上班玩本地AI了。

            terryT 离线
            terryT 离线
            terry
            超级版主
            编写于 最后由 编辑
            #8

            @densha 多看论坛过往的帖子,有xtx的很多优化,抄作业就好,50t/s正常。

            油管:https://www.youtube.com/@抡锤者

            1 条回复 最后回复
            1
            • terryT terry

              不建议使用显卡坞,显卡坞的价格可以买一x99洋垃圾了,为什么要买显卡坞,差的显卡坞用起来各种糟心,xtx性能不错,我用显卡坞的经历就是不好用:

              7900xtx戴尔笔记本显卡坞.jpeg

              hanyoudH 离线
              hanyoudH 离线
              hanyoud
              编写于 最后由 编辑
              #9

              @terry 我有一台MINI PC想着利用起来,就看外接有多大损失。 散热问题Mark一下 ,THX

              terryT 1 条回复 最后回复
              0
              • W 离线
                W 离线
                wobuxiee
                编写于 最后由 编辑
                #10

                @hanyoud 我也是有一台mini PC,但是没有oc口,计划把另外一个m2硬盘改成OC口,然后接一个7900xtx,现在就是不清楚用显卡坞好,还是搞一套x99好

                terryT 1 条回复 最后回复
                0
                • hanyoudH hanyoud

                  @terry 我有一台MINI PC想着利用起来,就看外接有多大损失。 散热问题Mark一下 ,THX

                  terryT 离线
                  terryT 离线
                  terry
                  超级版主
                  编写于 最后由 编辑
                  #11

                  @hanyoud 视频里讲的很清楚了,不想赘述,想要深入了解,去油管看吧。总之就是单卡显存够,没啥影响。一旦设计内存缓存,外接的劣势就特别大。

                  油管:https://www.youtube.com/@抡锤者

                  1 条回复 最后回复
                  0
                  • W wobuxiee

                    @hanyoud 我也是有一台mini PC,但是没有oc口,计划把另外一个m2硬盘改成OC口,然后接一个7900xtx,现在就是不清楚用显卡坞好,还是搞一套x99好

                    terryT 离线
                    terryT 离线
                    terry
                    超级版主
                    编写于 最后由 编辑
                    #12

                    @wobuxiee oclink比雷电4强很多,比雷电5也好,但是和原生相比差很多。

                    油管:https://www.youtube.com/@抡锤者

                    1 条回复 最后回复
                    0
                    • W 离线
                      W 离线
                      wobuxiee
                      编写于 最后由 编辑
                      #13

                      @terry 感谢大佬的回复

                      1 条回复 最后回复
                      0

                      你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                      厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                      有了你的建议,这篇帖子会更精彩哦 💗

                      注册 登录
                      回复
                      • 在新帖中回复
                      登录后回复
                      • 从旧到新
                      • 从新到旧
                      • 最多赞同


                      • 登录

                      • 没有帐号? 注册

                      • 登录或注册以进行搜索。
                      • 第一个帖子
                        最后一个帖子
                      0
                      • 版块
                      • 最新
                      • 标签
                      • 热门
                      • 用户
                      • 群组