跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场 App
  1. 主页
  2. 版块
  3. LLM讨论区
  4. 你好NVFP4:strata-0.1.44.1,qwen3.8-flash-next,rtx pro 5000 48GB + 64GB RAM,decode 130t/s,prefill2600 t/s

你好NVFP4:strata-0.1.44.1,qwen3.8-flash-next,rtx pro 5000 48GB + 64GB RAM,decode 130t/s,prefill2600 t/s

已定时 已固定 已锁定 已移动 精华 LLM讨论区
rtxpro5000strataqwen-flash
14 帖子 7 发布者 577 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • Tony WangT
    Tony WangT
    Tony Wang
    易有太极
    编写于 最后由 Tony Wang 编辑
    #4

    我是 128G 😉 , 不过看prefill 2000多好像不太高.

    kop wangK 2 条回复 最后回复
    0
    • Tony WangT Tony Wang

      我是 128G 😉 , 不过看prefill 2000多好像不太高.

      kop wangK
      kop wangK
      kop wang
      易有太极
      编写于 最后由 编辑
      #5

      @Tony-Wang 那就没有这个烦恼了,Conversation cache可以拉满。

      虚心交流,一起进步

      1 条回复 最后回复
      0
      • 张光璞张
        张光璞张
        张光璞
        贵族大夫 硕果累累
        编写于 最后由 编辑
        #6

        pro5000 真的强。 曾经有一块3万8 的pro5000 摆在我的面前,我没有下单。

        后来涨到了5万8 ,最后买了2x 9700 2x7900

        A 1 条回复 最后回复
        1
        • Tony WangT Tony Wang

          我是 128G 😉 , 不过看prefill 2000多好像不太高.

          kop wangK
          kop wangK
          kop wang
          易有太极
          编写于 最后由 编辑
          #7

          @Tony-Wang 说:

          不过看prefill 2000多好像不太高.

          这个还好,我本人用的是claude code驱动,冷启动直接50k token的prefill,总体来讲也能接受。

          而且这个2600是strata的 bench.bat跑出来的,实际中要高些。

          虚心交流,一起进步

          1 条回复 最后回复
          0
          • Tony WangT
            Tony WangT
            Tony Wang
            易有太极
            编写于 最后由 编辑
            #8

            @张光璞 我是在3.8万时候入手的, 还得感谢 @terry 的推荐.

            张光璞张 terryT 2 条回复 最后回复
            0
            • Tony WangT Tony Wang

              @张光璞 我是在3.8万时候入手的, 还得感谢 @terry 的推荐.

              张光璞张
              张光璞张
              张光璞
              贵族大夫 硕果累累
              编写于 最后由 编辑
              #9

              @Tony-Wang 说:

              @张光璞 我是在3.8万时候入手的, 还得感谢 @terry 的推荐.

              老特配享太庙

              1 条回复 最后回复
              1
              • 张光璞张 张光璞

                pro5000 真的强。 曾经有一块3万8 的pro5000 摆在我的面前,我没有下单。

                后来涨到了5万8 ,最后买了2x 9700 2x7900

                A
                A
                applejuice
                王侯将相
                编写于 最后由 编辑
                #10

                @张光璞 其实也不一定不好
                2x9700 跟 2x 7900 能做的应该比单张5000 pro 多

                只是功耗 维护是个问题

                张光璞张 1 条回复 最后回复
                0
                • A applejuice

                  @张光璞 其实也不一定不好
                  2x9700 跟 2x 7900 能做的应该比单张5000 pro 多

                  只是功耗 维护是个问题

                  张光璞张
                  张光璞张
                  张光璞
                  贵族大夫 硕果累累
                  编写于 最后由 编辑
                  #11

                  @applejuice 说:

                  @张光璞 其实也不一定不好
                  2x9700 跟 2x 7900 能做的应该比单张5000 pro 多

                  只是功耗 维护是个问题

                  N卡的生态还是好太多了。只是多卡玩法比较多样而已.

                  1 条回复 最后回复
                  0
                  • Tony WangT Tony Wang

                    @张光璞 我是在3.8万时候入手的, 还得感谢 @terry 的推荐.

                    terryT
                    terryT
                    terry
                    易有太极
                    编写于 最后由 编辑
                    #12

                    @Tony-Wang
                    我哥你要感谢你的钱包够厚,我推荐人买RTX Pro6000, 也不是所有人都买了。我也知道这卡会涨,但买不起😂

                    油管:https://www.youtube.com/@抡锤者

                    1 条回复 最后回复
                    0
                    • imbiplaza ASUSI
                      imbiplaza ASUSI
                      imbiplaza ASUS
                      谪仙人
                      编写于 最后由 imbiplaza ASUS 编辑
                      #13

                      资讯跑得很快。。。。。。。。。我还是需要一点呼吸空间

                      1 条回复 最后回复
                      1
                      • 游志浩游
                        游志浩游
                        游志浩
                        编写于 最后由 编辑
                        #14

                        向优秀老哥学习选配了rtx pro 5000 48GB + 64GB RAM,目前用llama.cpp 跑qwen3.8 27b Q8 KV 256k 个人用单并发,但是感觉任务一长速度上不去大概decode 30T左右,prefill也是2000多。老哥decode 130t/s,prefill2600 t/s,这个速度非常不错了感觉,不知道flash模型使用质量体感比27b怎么样?

                        1 条回复 最后回复
                        0

                        你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                        厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                        有了你的建议,这篇帖子会更精彩哦 💗

                        注册 登录
                        回复
                        • 在新帖中回复
                        登录后回复
                        • 从旧到新
                        • 从新到旧
                        • 最多赞同


                        • 登录

                        • 登录或注册以进行搜索。
                        • 第一个帖子
                          最后一个帖子
                        0
                        • 版块
                        • 最新
                        • 标签
                        • 热门
                        • 用户
                        • 群组