跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场 App
  1. 主页
  2. 版块
  3. AI硬件
  4. 我的显存是(8G、12G、24G、32G、48G… 512G)的话,到底能做什么?

我的显存是(8G、12G、24G、32G、48G… 512G)的话,到底能做什么?

已定时 已固定 已锁定 已移动 热议 AI硬件
本地模型多卡部署
29 帖子 10 发布者 1.3k 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • terryT
    terryT
    terry
    易有太极
    发表于 最后由 编辑
    #14

    以后总结表格在4列以内,不然手机看起来受罪,让AI整理即可。数据挺充分,以后我会整理更多专题页面,方便新人观看。也让一些论坛优质老帖能发挥余热。

    油管:https://www.youtube.com/@抡锤者

    johnnybegoodJ 1 条回复 最后回复
    0
    • terryT terry 于 将此主题固定
    • terryT terry

      以后总结表格在4列以内,不然手机看起来受罪,让AI整理即可。数据挺充分,以后我会整理更多专题页面,方便新人观看。也让一些论坛优质老帖能发挥余热。

      johnnybegoodJ
      johnnybegoodJ
      johnnybegood
      王侯将相
      发表于 最后由 johnnybegood 编辑
      #15

      @terry 用手机试了一下,横屏正好能把表格看全。。。这玩意也不好整,本来以为很简单,就用在线模型整的,结果搞了好几轮把我5小时额度都干爆了才弄完,早知道用本地模型了。

      1 条回复 最后回复
      0
      • kos orK
        kos orK
        kos or
        至尊皇帝
        发表于 最后由 编辑
        #16

        集結論壇精華 感謝 🙂

        1 条回复 最后回复
        0
        • imbiplaza ASUSI imbiplaza ASUS

          @johnnybegood

          可能是效率高了。。。

          但是大部分我看的都是600w满血版本

          Chu Hao-LungC
          Chu Hao-LungC
          Chu Hao-Lung
          体面乡绅
          发表于 最后由 编辑
          #17

          @imbiplaza-ASUS 我也糾結這個點很久 以下都是個人論點 歡迎理性開放討論

          RTX pro 6000 600W
          優點: 性能滿血 滿執行的時候音量較小
          缺點: 也是有燒接口的風險

          RTX pro 6000 max Q 300W
          優點: 體積較小 省電 適合多卡執行 不太需要擔心燒口
          缺點: 性能大約下降7-15% 跑滿載 聲音不小

          在各方面考慮下 以及長遠使用 我還是選擇max Q, 至於價位 在美國兩張卡是一樣的 如果要二手賣給卡販子 600W 他們比較願意收

          imbiplaza ASUSI 1 条回复 最后回复
          0
          • Chu Hao-LungC Chu Hao-Lung

            @imbiplaza-ASUS 我也糾結這個點很久 以下都是個人論點 歡迎理性開放討論

            RTX pro 6000 600W
            優點: 性能滿血 滿執行的時候音量較小
            缺點: 也是有燒接口的風險

            RTX pro 6000 max Q 300W
            優點: 體積較小 省電 適合多卡執行 不太需要擔心燒口
            缺點: 性能大約下降7-15% 跑滿載 聲音不小

            在各方面考慮下 以及長遠使用 我還是選擇max Q, 至於價位 在美國兩張卡是一樣的 如果要二手賣給卡販子 600W 他們比較願意收

            imbiplaza ASUSI
            imbiplaza ASUSI
            imbiplaza ASUS
            谪仙人
            发表于 最后由 编辑
            #18

            @Chu-Hao-Lung

            等多三年,我们去捡 rtxpro 的洋垃圾

            1 条回复 最后回复
            0
            • rock shiR
              rock shiR
              rock shi
              体面乡绅 硕果累累
              发表于 最后由 编辑
              #19

              96g还可以跑qwen3.8 Flash next 4bit量化,n-gram放在ssd

              主机:GPU0-3080 20g(H3),GPU1-3080 20g(Zimage)
              副机:2x2080ti 22g,strata qwen3.8 next Flash iq3_s

              terryT 1 条回复 最后回复
              0
              • rock shiR rock shi

                96g还可以跑qwen3.8 Flash next 4bit量化,n-gram放在ssd

                terryT
                terryT
                terry
                易有太极
                发表于 最后由 编辑
                #20

                @rock-shi 这是个不错的选择,但是这个模型很慢,体验没27B好,好处是知识面全。

                油管:https://www.youtube.com/@抡锤者

                rock shiR kos orK 2 条回复 最后回复
                1
                • terryT terry

                  @rock-shi 这是个不错的选择,但是这个模型很慢,体验没27B好,好处是知识面全。

                  rock shiR
                  rock shiR
                  rock shi
                  体面乡绅 硕果累累
                  发表于 最后由 编辑
                  #21

                  @terry 27b目前确实太天花板了

                  主机:GPU0-3080 20g(H3),GPU1-3080 20g(Zimage)
                  副机:2x2080ti 22g,strata qwen3.8 next Flash iq3_s

                  1 条回复 最后回复
                  0
                  • terryT terry

                    @rock-shi 这是个不错的选择,但是这个模型很慢,体验没27B好,好处是知识面全。

                    kos orK
                    kos orK
                    kos or
                    至尊皇帝
                    发表于 最后由 kos or 编辑
                    #22

                    @terry

                    Reddit 網友們也是在討論 qwen3.8 Flash next 體驗沒27B好, 沒必要為了qwen3.8 Flash next 升級硬體, 使用27B就夠應付大多數的場景

                    e72e48f5-7c37-4ae1-bf83-882115e53ab0-image.jpeg

                    rock shiR 1 条回复 最后回复
                    2
                    • kos orK kos or

                      @terry

                      Reddit 網友們也是在討論 qwen3.8 Flash next 體驗沒27B好, 沒必要為了qwen3.8 Flash next 升級硬體, 使用27B就夠應付大多數的場景

                      e72e48f5-7c37-4ae1-bf83-882115e53ab0-image.jpeg

                      rock shiR
                      rock shiR
                      rock shi
                      体面乡绅 硕果累累
                      发表于 最后由 编辑
                      #23

                      @kos-or 对于准96g mac用户,还是蛮期待未来迭代。毕竟大参数里只有它能塞得进96g mac,显存空间弥补了70b规模的断档

                      主机:GPU0-3080 20g(H3),GPU1-3080 20g(Zimage)
                      副机:2x2080ti 22g,strata qwen3.8 next Flash iq3_s

                      kos orK 1 条回复 最后回复
                      0
                      • rock shiR rock shi

                        @kos-or 对于准96g mac用户,还是蛮期待未来迭代。毕竟大参数里只有它能塞得进96g mac,显存空间弥补了70b规模的断档

                        kos orK
                        kos orK
                        kos or
                        至尊皇帝
                        发表于 最后由 编辑
                        #24

                        @rock-shi

                        我沒有Mac Mini, Macbook Pro, Mac Studio, 但根據網路使用者的反饋是Mac適合跑 MoE model, 不適合跑 Dense model, 未來看看MoE和 Dense models 的發展吧 只要生活上和工作上夠用 都很好 😊

                        rock shiR 1 条回复 最后回复
                        2
                        • kos orK kos or

                          @rock-shi

                          我沒有Mac Mini, Macbook Pro, Mac Studio, 但根據網路使用者的反饋是Mac適合跑 MoE model, 不適合跑 Dense model, 未來看看MoE和 Dense models 的發展吧 只要生活上和工作上夠用 都很好 😊

                          rock shiR
                          rock shiR
                          rock shi
                          体面乡绅 硕果累累
                          发表于 最后由 编辑
                          #25

                          @kos-or 是的是的👍

                          主机:GPU0-3080 20g(H3),GPU1-3080 20g(Zimage)
                          副机:2x2080ti 22g,strata qwen3.8 next Flash iq3_s

                          1 条回复 最后回复
                          0
                          • PEN CHI LINP
                            PEN CHI LINP
                            PEN CHI LIN
                            发表于 最后由 编辑
                            #26

                            補充一下雙5060TI的速度感覺也沒那麼不堪,就是顯存小硬傷,生視頻不好玩!

                            2026-09-07_090743.png
                            2026-09-07_090602.png

                            A 80zhangyan8 2 条回复 最后回复
                            0
                            • PEN CHI LINP PEN CHI LIN

                              補充一下雙5060TI的速度感覺也沒那麼不堪,就是顯存小硬傷,生視頻不好玩!

                              2026-09-07_090743.png
                              2026-09-07_090602.png

                              A
                              A
                              applejuice
                              王侯将相
                              发表于 最后由 编辑
                              #27

                              @PEN-CHI-LIN

                              上4 5060呗

                              1 条回复 最后回复
                              0
                              • PEN CHI LINP
                                PEN CHI LINP
                                PEN CHI LIN
                                发表于 最后由 编辑
                                #28

                                @applejuice 5060 出掉了前陣子呆灣這兩張5060比一張9700還貴,我直接出掉換兩張9700。16G想玩minimax h3很痛苦= = !

                                1 条回复 最后回复
                                0
                                • PEN CHI LINP PEN CHI LIN

                                  補充一下雙5060TI的速度感覺也沒那麼不堪,就是顯存小硬傷,生視頻不好玩!

                                  2026-09-07_090743.png
                                  2026-09-07_090602.png

                                  80zhangyan8
                                  80zhangyan8
                                  80zhangyan
                                  发表于 最后由 编辑
                                  #29

                                  @PEN-CHI-LIN 使用LLM足够了

                                  1 条回复 最后回复
                                  0
                                  • 系统 于 取消固定此主题

                                  你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                  厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                  有了你的建议,这篇帖子会更精彩哦 💗

                                  注册 登录
                                  回复
                                  • 在新帖中回复
                                  登录后回复
                                  • 从旧到新
                                  • 从新到旧
                                  • 最多赞同


                                  • 登录

                                  • 登录或注册以进行搜索。
                                  • 第一个帖子
                                    最后一个帖子
                                  0
                                  • 版块
                                  • 最新
                                  • 标签
                                  • 热门
                                  • 用户
                                  • 群组