跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. 下单 7900xtx, 开始折腾 llama.cpp

下单 7900xtx, 开始折腾 llama.cpp

已定时 已固定 已锁定 已移动 AI硬件
amd7900xtx
30 帖子 18 发布者 849 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • B 离线
    B 离线
    bobo
    编写于 最后由 编辑
    #14

    64K上下文够用吗

    1 条回复 最后回复
    0
    • L laobenxiong

      参考了大神的帖子和up主的视频, 预算有限的情况下, 下单了一张 7900xtx 24G, 打算折腾一下 llama.cpp. 我打算是在 Minisforum UM880PRO 上折腾, oculink 连接, pve 虚拟机跑 lmde7.

      早上到货了, 不得不说, 这个风扇真的很安静, 这个就很值了.

      先上几张图. 详细的作业慢慢补.

      ad590109-ae0b-4888-a373-b2565a4214d3-image.jpeg
      7baa2c14-908f-447a-b540-3c516677a5ff-image.jpeg
      1440bdd1-0a6b-4557-9b0c-aaf2426379d9-image.jpeg
      e3ea60d7-6d10-4099-bd31-9ce238029db7-image.jpeg

      J 离线
      J 离线
      johnnybegood
      劳动模范
      编写于 最后由 编辑
      #15

      @laobenxiong 确实贵, 全新未拆封的有5000冒一点点头的, 拆封二手一堆 4500以内的。。。

      1 条回复 最后回复
      0
      • G 离线
        G 离线
        goodhat5405
        编写于 最后由 编辑
        #16

        别纠结钱,走上道才是最重要的。

        1 条回复 最后回复
        0
        • williamlouisW williamlouis

          @墙内人 同感。应该是给 JD 交了保护费。

          lei ruanL 离线
          lei ruanL 离线
          lei ruan
          编写于 最后由 编辑
          #17

          @williamlouis 我昨晚也下单了,6090元,+1000w白金,准备抄作业 。

          1 条回复 最后回复
          1
          • E 离线
            E 离线
            exllm
            编写于 最后由 编辑
            #18

            我拼多多那家旗舰店买的, 5899, 安全下车。

            提醒各位注意天猫那家旗舰店,前几天有活动下了一单,收到货一查系列号已被注册, 而且是去年的老卡,怀疑二手充新,扯皮退货退款。

            terryT 1 条回复 最后回复
            0
            • terryT terry 从 LLM讨论区 移动了该主题
            • terryT terry 固定了该主题
            • AGIA 离线
              AGIA 离线
              AGI
              编写于 最后由 编辑
              #19

              昨天到货了,连同1000w电源,5729

              terryT 1 条回复 最后回复
              0
              • K 离线
                K 离线
                ktswang
                编写于 最后由 编辑
                #20

                我只能说你买贵了,抖音+红包 5669 一套

                terryT AGIA 2 条回复 最后回复
                0
                • AGIA AGI

                  昨天到货了,连同1000w电源,5729

                  terryT 离线
                  terryT 离线
                  terry
                  超级版主
                  编写于 最后由 编辑
                  #21

                  @AGI 这价格赚到了。我当时卡就是6100,过年的时候,草....

                  油管:https://www.youtube.com/@抡锤者

                  1 条回复 最后回复
                  0
                  • E exllm

                    我拼多多那家旗舰店买的, 5899, 安全下车。

                    提醒各位注意天猫那家旗舰店,前几天有活动下了一单,收到货一查系列号已被注册, 而且是去年的老卡,怀疑二手充新,扯皮退货退款。

                    terryT 离线
                    terryT 离线
                    terry
                    超级版主
                    编写于 最后由 编辑
                    #22

                    @exllm 必须退掉,注册国的,肯定是老卡,而且大概率有暗病,就是修过的。

                    油管:https://www.youtube.com/@抡锤者

                    1 条回复 最后回复
                    0
                    • K ktswang

                      我只能说你买贵了,抖音+红包 5669 一套

                      terryT 离线
                      terryT 离线
                      terry
                      超级版主
                      编写于 最后由 编辑
                      #23

                      @ktswang 抖音卖的能不能激活保修?

                      油管:https://www.youtube.com/@抡锤者

                      1 条回复 最后回复
                      0
                      • K ktswang

                        我只能说你买贵了,抖音+红包 5669 一套

                        AGIA 离线
                        AGIA 离线
                        AGI
                        编写于 最后由 编辑
                        #24

                        @ktswang 之前这个价格,后来红包没了,只有现在的红包,就买了

                        1 条回复 最后回复
                        0
                        • I 离线
                          I 离线
                          iocat
                          编写于 最后由 编辑
                          #25

                          mtp快了好多啊,我原始7900xtx跑27b q4只有
                          99bffb5d-f411-435b-ba44-478fd9ac7caf-image.jpeg

                          1 条回复 最后回复
                          0
                          • I 离线
                            I 离线
                            iocat
                            编写于 最后由 编辑
                            #26

                            我换了vulkan,发现好像不用上mtp速度也有这么快。。
                            19f19c72-244d-40e1-b407-807be3ad3c8f-image.jpeg

                            1 条回复 最后回复
                            0
                            • I 离线
                              I 离线
                              iocat
                              编写于 最后由 编辑
                              #27

                              vulkan + mtp 直接跑到50token/s了
                              d4b70b32-9f99-4ccd-bb8e-5aaaf430dbe4-image.jpeg

                              E 1 条回复 最后回复
                              0
                              • lei ruanL 离线
                                lei ruanL 离线
                                lei ruan
                                编写于 最后由 terry 编辑
                                #28

                                c6595560-d40c-499b-b98d-127db990497f-image.jpeg以前用免费的API,经常卡死,现在自由了。

                                1 条回复 最后回复
                                1
                                • I iocat

                                  vulkan + mtp 直接跑到50token/s了
                                  d4b70b32-9f99-4ccd-bb8e-5aaaf430dbe4-image.jpeg

                                  E 离线
                                  E 离线
                                  exllm
                                  编写于 最后由 编辑
                                  #29

                                  @iocat 我这 vulkan + mtp 最高可以到57 tokens / s

                                  1 条回复 最后回复
                                  0
                                  • williamlouisW 离线
                                    williamlouisW 离线
                                    williamlouis
                                    超级版主
                                    编写于 最后由 编辑
                                    #30

                                    上线文长度是重点。多少?256K有吗?

                                    个人主页:xlkj.org Telegram https://t.me/xlkjorg

                                    1 条回复 最后回复
                                    0
                                    • 系统 取消固定了该主题

                                    你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                    厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                                    有了你的建议,这篇帖子会更精彩哦 💗

                                    注册 登录
                                    回复
                                    • 在新帖中回复
                                    登录后回复
                                    • 从旧到新
                                    • 从新到旧
                                    • 最多赞同


                                    • 登录

                                    • 没有帐号? 注册

                                    • 登录或注册以进行搜索。
                                    • 第一个帖子
                                      最后一个帖子
                                    0
                                    • 版块
                                    • 最新
                                    • 标签
                                    • 热门
                                    • 用户
                                    • 群组