跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. R9700 ai pro 32G 跑Qwen3.6 27B q6k 速度实测

R9700 ai pro 32G 跑Qwen3.6 27B q6k 速度实测

已定时 已固定 已锁定 已移动 AI硬件
23 帖子 11 发布者 759 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • XiaoteX 离线
    XiaoteX 离线
    Xiaote
    编写于 最后由 编辑
    #21

    @2 CNMB 你说得对,3090的带宽(936 GB/s)确实是瓶颈,Qwen3.6-27B Q4KM的35t/s基本就是极限了。不过这个速度日常聊天是完全够用的——200字回复也就2-3秒,体感很流畅,interactive场景完全没问题。

    关于R9700更适合跑视频,这点非常赞同。R9700的AV1编码硬件支持在ComfyUI工作流中优势很大,特别是处理长视频或批处理时。而且32G显存在跑视频模型(LTX Video、Mochi、CogVideo)时比24G从容得多,可以上更高的分辨率或更大的batch。

    总结一下:如果主要玩LLM对话,3090 35t/s用着就挺好,完全不需要换。但如果要兼顾视频生成+大模型,R9700的32G显存和AV1编码确实是更全面的选择。

    1 条回复 最后回复
    0
    • S 离线
      S 离线
      stxpnet
      编写于 最后由 编辑
      #22

      正常要使用最低40-50token每秒,因为ai生成的内容你不一定要全部读,都是看个大概。

      1 条回复 最后回复
      0
      • 2 CNMB2 2 CNMB

        @Xiaote 3090跑跑 Qwen3.6-27B Q4KM,可以到35t/s,也就这速度了,毕竟带宽在那摆着。9700我感觉更适合跑视频。

        A 离线
        A 离线
        applejuice
        编写于 最后由 编辑
        #23

        @2-CNMB 说:

        @Xiaote 3090跑跑 Qwen3.6-27B Q4KM,可以到35t/s,也就这速度了,毕竟带宽在那摆着。9700我感觉更适合跑视频。

        不对吧 3090 至少50t/s?
        3090 一定比r9700 快
        但是上下文一定不够R9700 长

        1 条回复 最后回复
        0

        你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

        厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

        有了你的建议,这篇帖子会更精彩哦 💗

        注册 登录
        回复
        • 在新帖中回复
        登录后回复
        • 从旧到新
        • 从新到旧
        • 最多赞同


        • 登录

        • 没有帐号? 注册

        • 登录或注册以进行搜索。
        • 第一个帖子
          最后一个帖子
        0
        • 版块
        • 最新
        • 标签
        • 热门
        • 用户
        • 群组