跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场
  1. 主页
  2. 版块
  3. LLM讨论区
  4. 雙R9700玩qfn的朋友又有得玩了

雙R9700玩qfn的朋友又有得玩了

已定时 已固定 已锁定 已移动 热议 LLM讨论区
r9700qwen-flash多卡部署
55 帖子 16 发布者 766 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • fcmeF
    fcmeF
    fcme
    超凡大师
    编写于 最后由 编辑
    #2

    看你这个帖子又骗再买个R9700了😂
    去看了一下那个库,虽然还没发布,但是现在他们测试结果已经很炸裂了

    1 条回复 最后回复
    0
    • kos orK
      kos orK
      kos or
      超凡大师
      编写于 最后由 kos or 编辑
      #3

      這速度 大概要 5090 + Strata 或 雙卡 4090 + Strata 能達到的速度

      "2张4090下,输出能200 t/s,prefill能到7600 t/s" 引用

      我的雙卡 5070 Ti ~~~ 打電玩去 !

      fcmeF 1 条回复 最后回复
      0
      • kos orK kos or

        這速度 大概要 5090 + Strata 或 雙卡 4090 + Strata 能達到的速度

        "2张4090下,输出能200 t/s,prefill能到7600 t/s" 引用

        我的雙卡 5070 Ti ~~~ 打電玩去 !

        fcmeF
        fcmeF
        fcme
        超凡大师
        编写于 最后由 编辑
        #4

        @kos-or
        现在5070ti也涨很多了,可以考虑卖一个换点大容量的呢

        kos orK 1 条回复 最后回复
        0
        • fcmeF fcme

          @kos-or
          现在5070ti也涨很多了,可以考虑卖一个换点大容量的呢

          kos orK
          kos orK
          kos or
          超凡大师
          编写于 最后由 编辑
          #5

          @fcme

          哈哈 這建議讓我思考了一下

          AMD R9700 也可以跑ComfyUI嗎? 我也需要佈置一個ComfyUI 工作流
          還是 LLM (R9700) + ComfyUI (5070 Ti) 的佈置?

          张光璞张 fcmeF 2 条回复 最后回复
          0
          • A
            A
            applejuice
            技术大牛 劳动模范
            编写于 最后由 编辑
            #6

            是时候把3090 出掉换r9700吗?

            1 条回复 最后回复
            0
            • kos orK kos or

              @fcme

              哈哈 這建議讓我思考了一下

              AMD R9700 也可以跑ComfyUI嗎? 我也需要佈置一個ComfyUI 工作流
              還是 LLM (R9700) + ComfyUI (5070 Ti) 的佈置?

              张光璞张
              张光璞张
              张光璞
              技术大牛 劳动模范
              编写于 最后由 编辑
              #7

              @kos-or 说:

              @fcme

              哈哈 這建議讓我思考了一下

              AMD R9700 也可以跑ComfyUI嗎? 我也需要佈置一個ComfyUI 工作流
              還是 LLM (R9700) + ComfyUI (5070 Ti) 的佈置?

              可以,我今天刚用r9700 跑了视频 ,双9700 还没试

              fcmeF 1 条回复 最后回复
              1
              • kos orK kos or

                @fcme

                哈哈 這建議讓我思考了一下

                AMD R9700 也可以跑ComfyUI嗎? 我也需要佈置一個ComfyUI 工作流
                還是 LLM (R9700) + ComfyUI (5070 Ti) 的佈置?

                fcmeF
                fcmeF
                fcme
                超凡大师
                编写于 最后由 编辑
                #8

                @kos-or
                跑comfyui的话肯定是英伟达的会比较顺畅一些,有些第三方节点只有n卡有。我感觉你只要工作流稳定了以后,你到时候用API来驱动你的comfyui工作流就可以了,不过amd现在也可以跑了,虽然我用的不多,但是看论坛里有好多人都跑起来了。毕竟AI时代有些节点可能你自己没有的移植一个很容易,或者干脆自己做一个。

                kos orK 1 条回复 最后回复
                2
                • 张光璞张 张光璞

                  @kos-or 说:

                  @fcme

                  哈哈 這建議讓我思考了一下

                  AMD R9700 也可以跑ComfyUI嗎? 我也需要佈置一個ComfyUI 工作流
                  還是 LLM (R9700) + ComfyUI (5070 Ti) 的佈置?

                  可以,我今天刚用r9700 跑了视频 ,双9700 还没试

                  fcmeF
                  fcmeF
                  fcme
                  超凡大师
                  编写于 最后由 编辑
                  #9

                  @张光璞
                  @kos-or
                  这不就已经有人试过了

                  1 条回复 最后回复
                  0
                  • 张光璞张
                    张光璞张
                    张光璞
                    技术大牛 劳动模范
                    编写于 最后由 编辑
                    #10

                    Strata 这两天没密集更新 ,刚说可以歇一阵,这又来这么一出。

                    paul houP 1 条回复 最后回复
                    0
                    • fcmeF fcme

                      @kos-or
                      跑comfyui的话肯定是英伟达的会比较顺畅一些,有些第三方节点只有n卡有。我感觉你只要工作流稳定了以后,你到时候用API来驱动你的comfyui工作流就可以了,不过amd现在也可以跑了,虽然我用的不多,但是看论坛里有好多人都跑起来了。毕竟AI时代有些节点可能你自己没有的移植一个很容易,或者干脆自己做一个。

                      kos orK
                      kos orK
                      kos or
                      超凡大师
                      编写于 最后由 编辑
                      #11

                      @fcme said:

                      跑comfyui的话肯定是英伟达的会比较顺畅一些,有些第三方节点只有n卡有

                      試過N卡跑 ComfyUI,工作流基本上倒是沒什麼大問題,我再看一下軟硬體市場再隨機調整,
                      我的平台還沒佈建完成 邊用邊考慮好了

                      1 条回复 最后回复
                      0
                      • 张光璞张 张光璞

                        Strata 这两天没密集更新 ,刚说可以歇一阵,这又来这么一出。

                        paul houP
                        paul houP
                        paul hou
                        德高望重 劳动模范
                        编写于 最后由 编辑
                        #12

                        @张光璞
                        STRATA又更新了,單R9700的PREFILL上升19%

                        Prompt MMQ(PF_FUSED_NATIVE=0) Fused int8 kernel 提升
                        7,118 tok 3,953 ms(1,801 tok/s) 3,309 ms(2,160 tok/s) +19.5%
                        14,244 tok 7,567 ms(1,882 tok/s) 6,318 ms(2,256 tok/s) +19.8%
                        张光璞张 fcmeF 2 条回复 最后回复
                        2
                        • paul houP paul hou

                          @张光璞
                          STRATA又更新了,單R9700的PREFILL上升19%

                          Prompt MMQ(PF_FUSED_NATIVE=0) Fused int8 kernel 提升
                          7,118 tok 3,953 ms(1,801 tok/s) 3,309 ms(2,160 tok/s) +19.5%
                          14,244 tok 7,567 ms(1,882 tok/s) 6,318 ms(2,256 tok/s) +19.8%
                          张光璞张
                          张光璞张
                          张光璞
                          技术大牛 劳动模范
                          编写于 最后由 编辑
                          #13

                          @paul-hou 说:

                          @张光璞
                          STRATA又更新了,單R9700的PREFILL上升19%

                          Prompt MMQ(PF_FUSED_NATIVE=0) Fused int8 kernel 提升
                          7,118 tok 3,953 ms(1,801 tok/s) 3,309 ms(2,160 tok/s) +19.5%
                          14,244 tok 7,567 ms(1,882 tok/s) 6,318 ms(2,256 tok/s) +19.8%

                          我的9700 供电没解决,12V会被用电尖峰拉跳闸。 降频降压解决不了。

                          只能改电源了。

                          lesslin xiuL 1 条回复 最后回复
                          1
                          • paul houP paul hou

                            @张光璞
                            STRATA又更新了,單R9700的PREFILL上升19%

                            Prompt MMQ(PF_FUSED_NATIVE=0) Fused int8 kernel 提升
                            7,118 tok 3,953 ms(1,801 tok/s) 3,309 ms(2,160 tok/s) +19.5%
                            14,244 tok 7,567 ms(1,882 tok/s) 6,318 ms(2,256 tok/s) +19.8%
                            fcmeF
                            fcmeF
                            fcme
                            超凡大师
                            编写于 最后由 编辑
                            #14

                            @paul-hou
                            被这帖子搞的都有点心痒痒想入第二块9700😏

                            张光璞张 1 条回复 最后回复
                            0
                            • fcmeF
                              fcmeF
                              fcme
                              超凡大师
                              编写于 最后由 编辑
                              #15

                              有了第二块以后,上下文加并发加速度全齐。感觉一个两三个人甚至三四个人的小团队使用都没有问题了,看来这个r9700的潜力现在是终于被榨出来了

                              paul houP 1 条回复 最后回复
                              0
                              • fcmeF fcme

                                有了第二块以后,上下文加并发加速度全齐。感觉一个两三个人甚至三四个人的小团队使用都没有问题了,看来这个r9700的潜力现在是终于被榨出来了

                                paul houP
                                paul houP
                                paul hou
                                德高望重 劳动模范
                                编写于 最后由 编辑
                                #16

                                @fcme
                                確實讓人很想要第二塊R9700,不過現階段夠用就好,到時又要換qwen4 27B,單張應該還是能打的。

                                1 条回复 最后回复
                                0
                                • fcmeF fcme

                                  @paul-hou
                                  被这帖子搞的都有点心痒痒想入第二块9700😏

                                  张光璞张
                                  张光璞张
                                  张光璞
                                  技术大牛 劳动模范
                                  编写于 最后由 编辑
                                  #17

                                  @fcme 说:

                                  @paul-hou
                                  被这帖子搞的都有点心痒痒想入第二块9700😏

                                  昨天看到此贴时去京东看了下价,盈通的9700 都 14000了

                                  fcmeF 1 条回复 最后回复
                                  0
                                  • johnnybegoodJ
                                    johnnybegoodJ
                                    johnnybegood
                                    超凡大师
                                    编写于 最后由 编辑
                                    #18

                                    看这一轮轮军备竞赛, 我只想说一句话:

                                    吾生也有涯,而知也无涯。以有涯随无涯,殆已!

                                    张光璞张 1 条回复 最后回复
                                    1
                                    • 张光璞张 张光璞

                                      @fcme 说:

                                      @paul-hou
                                      被这帖子搞的都有点心痒痒想入第二块9700😏

                                      昨天看到此贴时去京东看了下价,盈通的9700 都 14000了

                                      fcmeF
                                      fcmeF
                                      fcme
                                      超凡大师
                                      编写于 最后由 编辑
                                      #19

                                      @张光璞
                                      哈哈,反应这么快么,我这里还是只要2299刀折合10750RMB,感觉还算有性价比。

                                      A 1 条回复 最后回复
                                      0
                                      • fcmeF fcme

                                        @张光璞
                                        哈哈,反应这么快么,我这里还是只要2299刀折合10750RMB,感觉还算有性价比。

                                        A
                                        A
                                        applejuice
                                        技术大牛 劳动模范
                                        编写于 最后由 applejuice 编辑
                                        #20

                                        @fcme 我这里有个卖3个月2手2000美金
                                        感觉是三个月前买了玩不下去的玩家

                                        fcmeF 1 条回复 最后回复
                                        0
                                        • A applejuice

                                          @fcme 我这里有个卖3个月2手2000美金
                                          感觉是三个月前买了玩不下去的玩家

                                          fcmeF
                                          fcmeF
                                          fcme
                                          超凡大师
                                          编写于 最后由 编辑
                                          #21

                                          @applejuice
                                          你要买的话看看asrock的,做工好,价格还便宜。美国应该有的

                                          A 1 条回复 最后回复
                                          0

                                          你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                          厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                          有了你的建议,这篇帖子会更精彩哦 💗

                                          注册 登录
                                          回复
                                          • 在新帖中回复
                                          登录后回复
                                          • 从旧到新
                                          • 从新到旧
                                          • 最多赞同


                                          • 登录

                                          • 登录或注册以进行搜索。
                                          • 第一个帖子
                                            最后一个帖子
                                          0
                                          • 版块
                                          • 最新
                                          • 标签
                                          • 热门
                                          • 用户
                                          • 群组