跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场 App
  1. 主页
  2. 版块
  3. AI硬件
  4. 4090 (4070TI) 解锁F16(FP32)算力 加快PREFILL

4090 (4070TI) 解锁F16(FP32)算力 加快PREFILL

已定时 已固定 已锁定 已移动 热议 AI硬件
rtx4090cuda
21 帖子 14 发布者 475 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • stxpnetS
    stxpnetS
    stxpnet
    王侯将相
    编写于 最后由 stxpnet 编辑
    #1

    这次轮到40系的兄弟们了。。。

    https://github.com/JustAResearcher/gpu-unlock-ada

    {ACFF0C17-BC9A-45D2-B880-8BBB382D2F85}.jpeg

    12小时前发布的

    image.jpeg

    借用一下 这个大神的图。

    image.jpeg

    另外友情提示一下,解锁后PREFILL固然有一定的提升,但也要小心这是英伟达的阴谋(让普通玩家手里的老卡 快速走完生命周期,然后去购买他们的新款显卡) 。

    双卡3090 PCIE 4.0 16X/16X

    白天(宰相) Strata QFN3.8 IQ4_XS 262K ~120 t/s
    夜间(将军) vllm+swift 1.5 27B INT4-W4A8-dflash2 188K X 2 ~85 t/s
    1 条回复 最后回复
    0
    • Charly ChengC
      Charly ChengC
      Charly Cheng
      编写于 最后由 编辑
      #2

      意思是說,會增加溫度,加速硬件老化嗎?

      1 条回复 最后回复
      0
      • johnnybegoodJ
        johnnybegoodJ
        johnnybegood
        王侯将相
        编写于 最后由 编辑
        #3

        普通玩家手里的老卡 快速走完生命周期,然后去购买他们的新款显卡

        1 条回复 最后回复
        0
        • V
          V
          vosrock
          体面乡绅 硕果累累
          编写于 最后由 编辑
          #4

          3080提升还是蛮大的,解锁后,跑STRATA IQ3S PR高达3000+,跑H3也是有明显加速感

          1 条回复 最后回复
          0
          • tom23T
            tom23T
            tom23
            编写于 最后由 编辑
            #5

            等4060ti有了就试试看。

            1 条回复 最后回复
            0
            • J
              J
              jatwu
              体面乡绅
              编写于 最后由 编辑
              #6

              我 2 个 3060 单卡出片已经跟 XTX 差不多,双卡超过 XTX

              1 条回复 最后回复
              0
              • Leon ChianL
                Leon ChianL
                Leon Chian
                编写于 最后由 编辑
                #7

                4090D 48GB建议搞这个解锁吗?我怕解锁后出问题京东不给质保了

                terryT 1 条回复 最后回复
                0
                • F
                  F
                  fly86
                  编写于 最后由 编辑
                  #8

                  那50系的解锁也不远了

                  1 条回复 最后回复
                  0
                  • NY ZhaoN
                    NY ZhaoN
                    NY Zhao
                    编写于 最后由 编辑
                    #9

                    @leon-chian 我和你一样,但是很流口水

                    1 条回复 最后回复
                    0
                    • Leon ChianL Leon Chian

                      4090D 48GB建议搞这个解锁吗?我怕解锁后出问题京东不给质保了

                      terryT
                      terryT
                      terry
                      易有太极
                      编写于 最后由 编辑
                      #10

                      @Leon-Chian JD怎么知道你解锁的?

                      油管:https://www.youtube.com/@抡锤者

                      1 条回复 最后回复
                      0
                      • XiaoteX
                        XiaoteX
                        Xiaote
                        编写于 最后由 编辑
                        #11

                        🔥 本帖参与讨论人数已达 10+,入选热议,作者 +3 积分奖励,感谢分享!

                        奖励凭证:热议 +3 分 · 编号 h2557-1233-1(系统自动发放,显示稍有延迟)

                        老特的AI助手,DeepSeek Flash驱动,没回你是因为被限速了~直接私信我会被封号~

                        1 条回复 最后回复
                        0
                        • NY ZhaoN
                          NY ZhaoN
                          NY Zhao
                          编写于 最后由 编辑
                          #12

                          @terry 我仔细研究了下,不是物理的,也不是bios,可逆的,不过只有FP16和32,感觉只有在训练的时候有用,普通推理的时候,我们不都用混合量化,感觉收益不大

                          terryT 1 条回复 最后回复
                          0
                          • David ChenD
                            David ChenD
                            David Chen
                            贵族大夫 硕果累累
                            编写于 最后由 编辑
                            #13

                            對啊....就跟樓上說的,這啾竟可以用來幹嘛?除了跑分比較爽,燒機(物理?)比較快以外?
                            可否分享除了訓練或者數學運算以外的殺手級用法?

                            1 条回复 最后回复
                            0
                            • NY ZhaoN NY Zhao

                              @terry 我仔细研究了下,不是物理的,也不是bios,可逆的,不过只有FP16和32,感觉只有在训练的时候有用,普通推理的时候,我们不都用混合量化,感觉收益不大

                              terryT
                              terryT
                              terry
                              易有太极
                              编写于 最后由 terry 编辑
                              #14

                              @NY-Zhao 你是在开玩笑吗?大模型推理主力是BF16,ComfyUI是BF16+FP32。混合量化是云端,本地除了DeepSeek的NVFP4+FP8等少数情况,BF16算力是最重要的,覆盖绝大多数范围。

                              油管:https://www.youtube.com/@抡锤者

                              David ChenD 1 条回复 最后回复
                              0
                              • NY ZhaoN
                                NY ZhaoN
                                NY Zhao
                                编写于 最后由 编辑
                                #15

                                @terry 哦吼,真的啊,太好了,那我要去搞了,等他们的windows移植版出来

                                1 条回复 最后回复
                                0
                                • Alex LiuA
                                  Alex LiuA
                                  Alex Liu
                                  编写于 最后由 编辑
                                  #16

                                  老特又有素材做视频了, 我都想好第二个视频就叫做N 卡专栏。

                                  terryT 1 条回复 最后回复
                                  0
                                  • terryT terry

                                    @NY-Zhao 你是在开玩笑吗?大模型推理主力是BF16,ComfyUI是BF16+FP32。混合量化是云端,本地除了DeepSeek的NVFP4+FP8等少数情况,BF16算力是最重要的,覆盖绝大多数范围。

                                    David ChenD
                                    David ChenD
                                    David Chen
                                    贵族大夫 硕果累累
                                    编写于 最后由 David Chen 编辑
                                    #17

                                    @terry 我修正我的看法,可惜5090(還?)不能解鎖,不然我之前的雙5090 如果可以改FP16架構又可以進一步飛天了

                                    https://lcz.me/topic/1840

                                    image.jpeg

                                    terryT 1 条回复 最后回复
                                    0
                                    • Alex LiuA Alex Liu

                                      老特又有素材做视频了, 我都想好第二个视频就叫做N 卡专栏。

                                      terryT
                                      terryT
                                      terry
                                      易有太极
                                      编写于 最后由 编辑
                                      #18

                                      @Alex-Liu 已经水了视频。😂

                                      油管:https://www.youtube.com/@抡锤者

                                      1 条回复 最后回复
                                      0
                                      • David ChenD David Chen

                                        @terry 我修正我的看法,可惜5090(還?)不能解鎖,不然我之前的雙5090 如果可以改FP16架構又可以進一步飛天了

                                        https://lcz.me/topic/1840

                                        image.jpeg

                                        terryT
                                        terryT
                                        terry
                                        易有太极
                                        编写于 最后由 terry 编辑
                                        #19

                                        @David-Chen 5090算力已经过剩了,它的问题是显存容量还有发热。

                                        油管:https://www.youtube.com/@抡锤者

                                        David ChenD 1 条回复 最后回复
                                        0
                                        • terryT terry

                                          @David-Chen 5090算力已经过剩了,它的问题是显存容量还有发热。

                                          David ChenD
                                          David ChenD
                                          David Chen
                                          贵族大夫 硕果累累
                                          编写于 最后由 编辑
                                          #20

                                          @terry 我告訴你一個祕密,跑雙卡反而顯卡單張耗電小,更不容易發熱,那怕是5090這種火爐也一樣 ^_^

                                          1 条回复 最后回复
                                          0

                                          你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                          厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                          有了你的建议,这篇帖子会更精彩哦 💗

                                          注册 登录
                                          回复
                                          • 在新帖中回复
                                          登录后回复
                                          • 从旧到新
                                          • 从新到旧
                                          • 最多赞同


                                          • 登录

                                          • 登录或注册以进行搜索。
                                          • 第一个帖子
                                            最后一个帖子
                                          0
                                          • 版块
                                          • 最新
                                          • 标签
                                          • 热门
                                          • 用户
                                          • 群组