跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. R9700到货,AI+Hermes部署llama.cpp+Qwen3.6-27B-Q4_K_M一次成功!

R9700到货,AI+Hermes部署llama.cpp+Qwen3.6-27B-Q4_K_M一次成功!

已定时 已固定 已锁定 已移动 AI硬件
19 帖子 9 发布者 698 浏览 3 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • terryT terry

    @wml-ai 睡到自然醒,困了就睡,今天顺便自己理了个发。

    AGIA 离线
    AGIA 离线
    AGI
    编写于 最后由 编辑
    #8

    @terry 说:

    @wml-ai 睡到自然醒,困了就睡,今天顺便自己理了个发。

    推子用的几毫米的?我从口罩到现在一直在家推子自己推

    terryT 1 条回复 最后回复
    0
    • AGIA AGI

      @terry 说:

      @wml-ai 睡到自然醒,困了就睡,今天顺便自己理了个发。

      推子用的几毫米的?我从口罩到现在一直在家推子自己推

      terryT 离线
      terryT 离线
      terry
      超级版主
      编写于 最后由 编辑
      #9

      @AGI 不知道,京东京造,75块钱买的,买回来自己选择差不多的长度,不知道具体数字,然后短一点,自己推掉就行。我一般就是圆寸,干的很短。已经很久没去过理发店 了。

      油管:https://www.youtube.com/@抡锤者

      1 条回复 最后回复
      0
      • W 离线
        W 离线
        wml-ai
        编写于 最后由 编辑
        #10

        @densha 估计不会一直运行大模型,感觉线上模型能力更强一些,比如deepseek-v4-flash。

        1 条回复 最后回复
        1
        • Eric XiaoE 离线
          Eric XiaoE 离线
          Eric Xiao
          编写于 最后由 编辑
          #11

          MTP最大猜3个token,你现在tokens速度多块

          1 条回复 最后回复
          0
          • W 离线
            W 离线
            wml-ai
            编写于 最后由 编辑
            #12

            今天下午又编译了一次 Vulkan 版本的 llama.cpp,做了简单的测试,和ROCm版对比,各有千秋吧,相差不大。但是意外发现,运行Vulkan版的本地模型比ROCm版的功耗要低。

            Vulkan版测试结果:
            截屏2026-06-03 下午4.18.04.png

            ROCm版的测试结果:
            截屏2026-06-03 下午4.18.42.png

            加载ROCm版模型时的功耗(未执行任务):
            截屏2026-06-03 下午6.12.25.png

            加载Vulkan版模型时的功耗(未执行任务):
            截屏2026-06-03 下午6.14.22.png

            执行任务时,Vulkan版也比ROCm版的温度、功耗要低,风扇转速也稍低一些。更重要的是,Vulkan版出结果更快,GPU运行一会儿功耗就下来了,而ROCm版的会运行很久,风扇狂转。

            1 条回复 最后回复
            1
            • 系统 取消固定了该主题
            • S 离线
              S 离线
              sospda
              编写于 最后由 编辑
              #13

              上MTP版本, Q4KM ,直接上50t/s , 提速明显

              1 条回复 最后回复
              0
              • W 离线
                W 离线
                wml-ai
                编写于 最后由 编辑
                #14

                @sospda 也测试了使用MTP的情况(简单测试没有使用长文档输入测试),MTP确实有明显提升,而且依然是Vulkan比ROCm快,不过没有到50t/s,但是日常使用完全够了,体验不差。

                截屏2026-06-05 上午9.47.46.png

                现在日常使用就是Vulkan+MTP,功耗还低,风扇噪音较小,比较满意了。

                1 条回复 最后回复
                1
                • L 离线
                  L 离线
                  linghu007
                  编写于 最后由 编辑
                  #15

                  微信图片_20260605103247_234_2.png
                  兄弟,你这套配下来多少钱啊?
                  图是我准备配的配置。主要是考虑DDR4升级便宜些。CUP缓存大256M。电源大是因为将来顺便升级双显卡。

                  williamlouisW 1 条回复 最后回复
                  0
                  • L linghu007

                    微信图片_20260605103247_234_2.png
                    兄弟,你这套配下来多少钱啊?
                    图是我准备配的配置。主要是考虑DDR4升级便宜些。CUP缓存大256M。电源大是因为将来顺便升级双显卡。

                    williamlouisW 离线
                    williamlouisW 离线
                    williamlouis
                    超级版主
                    编写于 最后由 编辑
                    #16

                    @linghu007 显卡涨价了。

                    个人主页:xlkj.org Telegram https://t.me/xlkjorg

                    L 1 条回复 最后回复
                    0
                    • williamlouisW williamlouis

                      @linghu007 显卡涨价了。

                      L 离线
                      L 离线
                      linghu007
                      编写于 最后由 编辑
                      #17

                      @williamlouis 显卡日常价格就是10900,现在618奸商搞的。但我看了下CUP和内存反而降了,不过我看的是二手。显卡才是新的。

                      1 条回复 最后回复
                      0
                      • williamlouisW 离线
                        williamlouisW 离线
                        williamlouis
                        超级版主
                        编写于 最后由 编辑
                        #18

                        我们只能接受。生产力需要就入手。没项目就等等。

                        个人主页:xlkj.org Telegram https://t.me/xlkjorg

                        1 条回复 最后回复
                        0
                        • W 离线
                          W 离线
                          wml-ai
                          编写于 最后由 编辑
                          #19

                          @linghu007 总体价格和你的差不多,但是性价比没你的高。

                          1 条回复 最后回复
                          0

                          你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                          厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                          有了你的建议,这篇帖子会更精彩哦 💗

                          注册 登录
                          回复
                          • 在新帖中回复
                          登录后回复
                          • 从旧到新
                          • 从新到旧
                          • 最多赞同


                          • 登录

                          • 没有帐号? 注册

                          • 登录或注册以进行搜索。
                          • 第一个帖子
                            最后一个帖子
                          0
                          • 版块
                          • 最新
                          • 标签
                          • 热门
                          • 用户
                          • 群组