跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场 App
  1. 主页
  2. 版块
  3. LLM讨论区
  4. 双 RTX PRO 6000 + 48GB RAM:Strata 跑 DeepSeek 1017,Decode 80.8 tok/s,524K Prefill 1,385 tok/s

双 RTX PRO 6000 + 48GB RAM:Strata 跑 DeepSeek 1017,Decode 80.8 tok/s,524K Prefill 1,385 tok/s

已定时 已固定 已锁定 已移动 LLM讨论区
rtxpro6000deepseek多卡部署
18 帖子 7 发布者 443 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • johnnybegoodJ johnnybegood

    @lunarmoon26 说实话有点难看啊, 这是 deepseek V4.1 ?

    看我的本地 qfn : tihu2.html

    lunarmoon26L
    lunarmoon26L
    lunarmoon26
    体面乡绅
    编写于 最后由 lunarmoon26 编辑
    #6

    @johnnybegood 你用的prompt,思考等级,harness具体是什么?

    我是直接用的Strata自带的UI选项全默认,prompt就是:Generate an SVG of a pelican riding a bicycle

    Screenshot From 2026-10-24 22-59-47.png

    johnnybegoodJ 1 条回复 最后回复
    1
    • ,terryT terry 将此主题从 AI硬件 移至此处
    • terryT
      terryT
      terry
      易有太极
      编写于 最后由 编辑
      #7

      我一直认为最后还是要把思考放到harness中去,模型就裸出,提升效率。当然有的模型公司本身没有harness,也为了跑分和用户体验,很难做到。所以我觉得梁子有竞争力,打包优化避免很多不必要的开支。

      油管:https://www.youtube.com/@抡锤者

      1 条回复 最后回复
      0
      • lunarmoon26L lunarmoon26

        按规矩:鹈鹕骑车(Generate an SVG of a pelican riding a bicycle)

        pelican-riding-a-bicycle.svg

        terryT
        terryT
        terry
        易有太极
        编写于 最后由 编辑
        #8

        @lunarmoon26 我弟,这个测试你放svg或者html文件啊。

        油管:https://www.youtube.com/@抡锤者

        1 条回复 最后回复
        0
        • dardeaw fengD
          dardeaw fengD
          dardeaw feng
          硕果累累 贵族大夫
          编写于 最后由 dardeaw feng 编辑
          #9

          看完後還是覺得去儲值比較省錢

          無意冒犯啦,但有實驗精神給兄弟們羨慕真好

          lunarmoon26L 1 条回复 最后回复
          0
          • dardeaw fengD dardeaw feng

            看完後還是覺得去儲值比較省錢

            無意冒犯啦,但有實驗精神給兄弟們羨慕真好

            lunarmoon26L
            lunarmoon26L
            lunarmoon26
            体面乡绅
            编写于 最后由 编辑
            #10

            @dardeaw-feng 没错 如果纯粹使用 还是直接调用api充值比较便宜。但是有个问题是api一般会throttle request 高频调用就会被卡脖子

            本地的一个好处是可以不需要等timeout

            1 条回复 最后回复
            0
            • lunarmoon26L lunarmoon26

              @johnnybegood 你用的prompt,思考等级,harness具体是什么?

              我是直接用的Strata自带的UI选项全默认,prompt就是:Generate an SVG of a pelican riding a bicycle

              Screenshot From 2026-10-24 22-59-47.png

              johnnybegoodJ
              johnnybegoodJ
              johnnybegood
              王侯将相
              编写于 最后由 johnnybegood 编辑
              #11

              @lunarmoon26 我也没有调参数, 都是默认, 提示词就是 , 给我生成一个鹈鹕骑自行车的 SVG动画 , 没有其他任何要求, 说实话我自己也很惊讶, 模型是 qfn iq4-xs 。 确实没有单独特地去调优。我感觉可能就是抽卡比较幸运吧。抽到了幸运卡。 用的是 deepseek harness xhigh 。 这是我的原贴:https://lcz.me/topic/2168 , 第一次我写错了, 把 鹈鹕 写成了 醍醐, 可能因为他思考过一回了吧, 第二次的时候只是把 醍醐 改成了 鹈鹕, 就成 tihu2.html 这个样子了。这两次为什么差别如此之大, 我也无法解释。

              lunarmoon26L 1 条回复 最后回复
              0
              • johnnybegoodJ johnnybegood

                @lunarmoon26 我也没有调参数, 都是默认, 提示词就是 , 给我生成一个鹈鹕骑自行车的 SVG动画 , 没有其他任何要求, 说实话我自己也很惊讶, 模型是 qfn iq4-xs 。 确实没有单独特地去调优。我感觉可能就是抽卡比较幸运吧。抽到了幸运卡。 用的是 deepseek harness xhigh 。 这是我的原贴:https://lcz.me/topic/2168 , 第一次我写错了, 把 鹈鹕 写成了 醍醐, 可能因为他思考过一回了吧, 第二次的时候只是把 醍醐 改成了 鹈鹕, 就成 tihu2.html 这个样子了。这两次为什么差别如此之大, 我也无法解释。

                lunarmoon26L
                lunarmoon26L
                lunarmoon26
                体面乡绅
                编写于 最后由 lunarmoon26 编辑
                #12

                @johnnybegood 也就是说你在dsh里说“给我生成一个鹈鹕骑自行车的 SVG动画” 他自己生成了个html吗?没有写别的要求?
                还有就是dsh web profile里自带的工具,Skill和harness loop本身都会影响输出结果。(还有你自己电脑上装的Skill 看下你的~/.agents/skills里有没有东西被自动加载了)

                严谨来讲最好写个单独的eval python来调用LLM生成鹈鹕svg

                johnnybegoodJ 1 条回复 最后回复
                0
                • lunarmoon26L lunarmoon26

                  @johnnybegood 也就是说你在dsh里说“给我生成一个鹈鹕骑自行车的 SVG动画” 他自己生成了个html吗?没有写别的要求?
                  还有就是dsh web profile里自带的工具,Skill和harness loop本身都会影响输出结果。(还有你自己电脑上装的Skill 看下你的~/.agents/skills里有没有东西被自动加载了)

                  严谨来讲最好写个单独的eval python来调用LLM生成鹈鹕svg

                  johnnybegoodJ
                  johnnybegoodJ
                  johnnybegood
                  王侯将相
                  编写于 最后由 编辑
                  #13

                  @lunarmoon26

                  1, 启动strata, 加载模型qfn iq4_xs
                  2,启动deepseek harnness , 开新对话,选中本地qfn模型

                  3, 请帮我生成一个醍醐骑自行车的svg动画
                  4,生成了个醍醐灌顶骑车
                  5,错了!你是不是傻。 重新生成 鹈鹕骑自行车的svg动画
                  6,跑了20多分钟就出来tihu2了

                  lunarmoon26L 1 条回复 最后回复
                  0
                  • johnnybegoodJ johnnybegood

                    @lunarmoon26

                    1, 启动strata, 加载模型qfn iq4_xs
                    2,启动deepseek harnness , 开新对话,选中本地qfn模型

                    3, 请帮我生成一个醍醐骑自行车的svg动画
                    4,生成了个醍醐灌顶骑车
                    5,错了!你是不是傻。 重新生成 鹈鹕骑自行车的svg动画
                    6,跑了20多分钟就出来tihu2了

                    lunarmoon26L
                    lunarmoon26L
                    lunarmoon26
                    体面乡绅
                    编写于 最后由 编辑
                    #14

                    @johnnybegood 是的 模型一样的情况下有harness和没harness生成的svg差别很大

                    1 条回复 最后回复
                    0
                    • soop ladiosS
                      soop ladiosS
                      soop ladios
                      贵族大夫 硕果累累
                      编写于 最后由 编辑
                      #15

                      光就跑deepseek來說, DGX spark GB10還是比較香一點, 一張RTX pro 6000差不多就四台GB10的錢. 4台GB10可以跑滿血deepseek v4.1 flash 1017, decode 90~100 tok/s, prefill 3500-4000 tok/s, 500K ctx 10併發.

                      kos orK johnnybegoodJ 2 条回复 最后回复
                      1
                      • soop ladiosS soop ladios

                        光就跑deepseek來說, DGX spark GB10還是比較香一點, 一張RTX pro 6000差不多就四台GB10的錢. 4台GB10可以跑滿血deepseek v4.1 flash 1017, decode 90~100 tok/s, prefill 3500-4000 tok/s, 500K ctx 10併發.

                        kos orK
                        kos orK
                        kos or
                        至尊皇帝
                        编写于 最后由 kos or 编辑
                        #16

                        @soop-ladios said:

                        deepseek v4.1 flash 1017, decode 90~100 tok/s, prefill 3500-4000 tok/s, 500K ctx 10併發.

                        10併發, aggregate 速度有多快呢? 聽起來好像不錯

                        RTX pro 6000 算多功全能型, 跑ComfyUI 應該很順

                        soop ladiosS 1 条回复 最后回复
                        0
                        • kos orK kos or

                          @soop-ladios said:

                          deepseek v4.1 flash 1017, decode 90~100 tok/s, prefill 3500-4000 tok/s, 500K ctx 10併發.

                          10併發, aggregate 速度有多快呢? 聽起來好像不錯

                          RTX pro 6000 算多功全能型, 跑ComfyUI 應該很順

                          soop ladiosS
                          soop ladiosS
                          soop ladios
                          贵族大夫 硕果累累
                          编写于 最后由 编辑
                          #17

                          @kos-or 10併發約230-260 tok/s.

                          1 条回复 最后回复
                          1
                          • soop ladiosS soop ladios

                            光就跑deepseek來說, DGX spark GB10還是比較香一點, 一張RTX pro 6000差不多就四台GB10的錢. 4台GB10可以跑滿血deepseek v4.1 flash 1017, decode 90~100 tok/s, prefill 3500-4000 tok/s, 500K ctx 10併發.

                            johnnybegoodJ
                            johnnybegoodJ
                            johnnybegood
                            王侯将相
                            编写于 最后由 编辑
                            #18

                            @soop-ladios 四张 5070ti 加起来, 从纯硬件角度看真的要超过 rtx pro 6000了, 就看软件能发挥硬件多少能力的问题了。

                            1 条回复 最后回复
                            1

                            你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                            厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                            有了你的建议,这篇帖子会更精彩哦 💗

                            注册 登录
                            回复
                            • 在新帖中回复
                            登录后回复
                            • 从旧到新
                            • 从新到旧
                            • 最多赞同


                            • 登录

                            • 登录或注册以进行搜索。
                            • 第一个帖子
                              最后一个帖子
                            0
                            • 版块
                            • 最新
                            • 标签
                            • 热门
                            • 用户
                            • 群组