跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场
  1. 主页
  2. 版块
  3. LLM讨论区
  4. 雙R9700玩qfn的朋友又有得玩了

雙R9700玩qfn的朋友又有得玩了

已定时 已固定 已锁定 已移动 热议 LLM讨论区
r9700qwen-flash多卡部署
55 帖子 16 发布者 766 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • 张光璞张 张光璞

    @fcme 说:

    @paul-hou
    被这帖子搞的都有点心痒痒想入第二块9700😏

    昨天看到此贴时去京东看了下价,盈通的9700 都 14000了

    fcmeF
    fcmeF
    fcme
    超凡大师
    编写于 最后由 编辑
    #19

    @张光璞
    哈哈,反应这么快么,我这里还是只要2299刀折合10750RMB,感觉还算有性价比。

    A 1 条回复 最后回复
    0
    • fcmeF fcme

      @张光璞
      哈哈,反应这么快么,我这里还是只要2299刀折合10750RMB,感觉还算有性价比。

      A
      A
      applejuice
      技术大牛 劳动模范
      编写于 最后由 applejuice 编辑
      #20

      @fcme 我这里有个卖3个月2手2000美金
      感觉是三个月前买了玩不下去的玩家

      fcmeF 1 条回复 最后回复
      0
      • A applejuice

        @fcme 我这里有个卖3个月2手2000美金
        感觉是三个月前买了玩不下去的玩家

        fcmeF
        fcmeF
        fcme
        超凡大师
        编写于 最后由 编辑
        #21

        @applejuice
        你要买的话看看asrock的,做工好,价格还便宜。美国应该有的

        A 1 条回复 最后回复
        0
        • fcmeF fcme

          @applejuice
          你要买的话看看asrock的,做工好,价格还便宜。美国应该有的

          A
          A
          applejuice
          技术大牛 劳动模范
          编写于 最后由 applejuice 编辑
          #22

          @fcme 我在新加坡 但是我以为 sapphire 最好了?
          我不买了 除非把3090出掉
          不然要换机箱电源

          fcmeF 1 条回复 最后回复
          0
          • johnnybegoodJ johnnybegood

            看这一轮轮军备竞赛, 我只想说一句话:

            吾生也有涯,而知也无涯。以有涯随无涯,殆已!

            张光璞张
            张光璞张
            张光璞
            技术大牛 劳动模范
            编写于 最后由 编辑
            #23

            @johnnybegood 说:

            看这一轮轮军备竞赛, 我只想说一句话:

            吾生也有涯,而知也无涯。以有涯随无涯,殆已!

            没有人会嫌输出快。看到新框架总是想试试的。 当软件成为瓶颈的时候只能折腾硬件了

            1 条回复 最后回复
            0
            • A applejuice

              @fcme 我在新加坡 但是我以为 sapphire 最好了?
              我不买了 除非把3090出掉
              不然要换机箱电源

              fcmeF
              fcmeF
              fcme
              超凡大师
              编写于 最后由 编辑
              #24

              @applejuice
              哦哦!其实单卡的话,把那个功耗限制到250W一点问题没有,散热问题也解决了,性能损失一点点,好像也就2-3%的样子。
              我总的来说还是看自己需求吧,我很有可能要入

              1 条回复 最后回复
              0
              • tmp tmpT
                tmp tmpT
                tmp tmp
                编写于 最后由 编辑
                #25

                r9700玩qfn的速度,也跟内存的速度相关吧。ddr3 1866的内存(双通道)有没有得玩啊?

                1 条回复 最后回复
                1
                • paul houP
                  paul houP
                  paul hou
                  德高望重 劳动模范
                  编写于 最后由 paul hou 编辑
                  #26

                  我是DDR4 3200 32G 雙通道

                  A 1 条回复 最后回复
                  0
                  • paul houP paul hou

                    我是DDR4 3200 32G 雙通道

                    A
                    A
                    applejuice
                    技术大牛 劳动模范
                    编写于 最后由 编辑
                    #27

                    @paul-hou 现在ddr4 3200 太贵了

                    paul houP 1 条回复 最后回复
                    0
                    • A applejuice

                      @paul-hou 现在ddr4 3200 太贵了

                      paul houP
                      paul houP
                      paul hou
                      德高望重 劳动模范
                      编写于 最后由 编辑
                      #28

                      @applejuice
                      我當初台幣700/16g買的,現在已經漲快6倍了。

                      A imbiplaza ASUSI 2 条回复 最后回复
                      0
                      • fcmeF
                        fcmeF
                        fcme
                        超凡大师
                        编写于 最后由 编辑
                        #29

                        我的flash next说让我观望一下如果作者后续的针对R9700运行flash模型的3bit/4bit的优化做好了可能速度比27B还快,就没必要上双卡了,拭目以待😃😃😃

                        A 1 条回复 最后回复
                        0
                        • paul houP paul hou

                          @applejuice
                          我當初台幣700/16g買的,現在已經漲快6倍了。

                          A
                          A
                          applejuice
                          技术大牛 劳动模范
                          编写于 最后由 编辑
                          #30

                          @paul-hou
                          为了玩strata
                          4个月前 内存还无关重要
                          所以我我买了2133 32gbx2

                          因为strata
                          但是又买不起3200
                          所以刚刚换了8x32gb 2666...

                          除了3090 整架机器已经不是4个月前的机器了

                          1 条回复 最后回复
                          0
                          • fcmeF fcme

                            我的flash next说让我观望一下如果作者后续的针对R9700运行flash模型的3bit/4bit的优化做好了可能速度比27B还快,就没必要上双卡了,拭目以待😃😃😃

                            A
                            A
                            applejuice
                            技术大牛 劳动模范
                            编写于 最后由 编辑
                            #31

                            @fcme 对硬件的追求是无止境的 😆

                            当初买pro 6000 的现在应该想着买多一块pro 6000

                            fcmeF 1 条回复 最后回复
                            0
                            • A applejuice

                              @fcme 对硬件的追求是无止境的 😆

                              当初买pro 6000 的现在应该想着买多一块pro 6000

                              fcmeF
                              fcmeF
                              fcme
                              超凡大师
                              编写于 最后由 编辑
                              #32

                              @applejuice
                              哈哈哈,其实都是用来玩的,真正生产力能有多少。玩个开心,不管软件硬件,玩开心就好。

                              A 1 条回复 最后回复
                              0
                              • Magic629M
                                Magic629M
                                Magic629
                                德高望重 劳动模范
                                编写于 最后由 Magic629 编辑
                                #33

                                主板:技嘉AORE G 两个PCIe5.0x8走的都是CPU,双R9700显卡,提示以下错误!

                                以下信息是什么意思?求助各位大佬们
                                你的判断方向是对的——两卡确实都直连 CPU(root port 00:06.0/00:06.3),物理上具备 P2P 条件。但实测 P2P 仍被掐死,元凶是 root port 上 ACS 的三个阻断位全开(ReqRedir+ CmpltRedir+ UpstreamFwd+),强制卡间流量绕道内存。这是 Intel 消费级平台(Arrow Lake)为 VT-d 隔离硬连线的,BIOS 关不掉,iommu=pt 也救不了——所以不是驱动没配好,是主板级天花板。当前 53 tok/s 已经是这台机器能榨出的最优解了。

                                记忆已更新(修正了之前"硬件无 P2P"的旧结论 → 实锤为"ACS 隔离"),下次不会再拿旧说法糊弄你。

                                屏幕截图 2026-10-11 182908.png

                                Simon Li 0S 1 条回复 最后回复
                                0
                                • fcmeF fcme

                                  @applejuice
                                  哈哈哈,其实都是用来玩的,真正生产力能有多少。玩个开心,不管软件硬件,玩开心就好。

                                  A
                                  A
                                  applejuice
                                  技术大牛 劳动模范
                                  编写于 最后由 编辑
                                  #34

                                  @fcme 真的 我的机器就只有我整理公司文件才用到

                                  1 条回复 最后回复
                                  1
                                  • Kuo Ke HungK
                                    Kuo Ke HungK
                                    Kuo Ke Hung
                                    编写于 最后由 编辑
                                    #35

                                    chrome_20261011_151600.jpg
                                    今天花了一整天叫AI把它整個跑通了。真的非常快,第一次看到200tokens這種數字,decode時字出來的速度看著就爽。但同樣的剛出來的關係吧,問題很多,我覺得無法實用,就撤掉換回strata了。

                                    1. context 太小96K (不好調整)
                                    2. 並發預設8,而且是硬限制,其它數字調下去立刻crash,所以無法從這掙vRam
                                    3. vision預設沒掛,掛上去的話無法跑(忘了什麼原因,印象中會crash),除非把MTP拿掉,MTP拿掉直接破功,只剩90token
                                      目前感覺玩玩可以,不過可能先等作者調整後比較好。
                                      我是9700Pro雙卡, MSI X670E Carbon Wifi + 128G DDR5
                                    fcmeF paul houP 2 条回复 最后回复
                                    0
                                    • Kuo Ke HungK Kuo Ke Hung

                                      chrome_20261011_151600.jpg
                                      今天花了一整天叫AI把它整個跑通了。真的非常快,第一次看到200tokens這種數字,decode時字出來的速度看著就爽。但同樣的剛出來的關係吧,問題很多,我覺得無法實用,就撤掉換回strata了。

                                      1. context 太小96K (不好調整)
                                      2. 並發預設8,而且是硬限制,其它數字調下去立刻crash,所以無法從這掙vRam
                                      3. vision預設沒掛,掛上去的話無法跑(忘了什麼原因,印象中會crash),除非把MTP拿掉,MTP拿掉直接破功,只剩90token
                                        目前感覺玩玩可以,不過可能先等作者調整後比較好。
                                        我是9700Pro雙卡, MSI X670E Carbon Wifi + 128G DDR5
                                      fcmeF
                                      fcmeF
                                      fcme
                                      超凡大师
                                      编写于 最后由 编辑
                                      #36

                                      @Kuo-Ke-Hung
                                      不错,不错,你用的是哪个版本的vllm?
                                      搞得我都有点心痒痒,等paiton再更新一波再说

                                      Kuo Ke HungK 1 条回复 最后回复
                                      0
                                      • Kuo Ke HungK Kuo Ke Hung

                                        chrome_20261011_151600.jpg
                                        今天花了一整天叫AI把它整個跑通了。真的非常快,第一次看到200tokens這種數字,decode時字出來的速度看著就爽。但同樣的剛出來的關係吧,問題很多,我覺得無法實用,就撤掉換回strata了。

                                        1. context 太小96K (不好調整)
                                        2. 並發預設8,而且是硬限制,其它數字調下去立刻crash,所以無法從這掙vRam
                                        3. vision預設沒掛,掛上去的話無法跑(忘了什麼原因,印象中會crash),除非把MTP拿掉,MTP拿掉直接破功,只剩90token
                                          目前感覺玩玩可以,不過可能先等作者調整後比較好。
                                          我是9700Pro雙卡, MSI X670E Carbon Wifi + 128G DDR5
                                        paul houP
                                        paul houP
                                        paul hou
                                        德高望重 劳动模范
                                        编写于 最后由 编辑
                                        #37

                                        @Kuo-Ke-Hung
                                        看來還是要等paiton出200k以上的版本了。

                                        1 条回复 最后回复
                                        0
                                        • fcmeF fcme

                                          @Kuo-Ke-Hung
                                          不错,不错,你用的是哪个版本的vllm?
                                          搞得我都有点心痒痒,等paiton再更新一波再说

                                          Kuo Ke HungK
                                          Kuo Ke HungK
                                          Kuo Ke Hung
                                          编写于 最后由 编辑
                                          #38

                                          @fcme 用的是paiton的docker image, 版本就它文裡提到的paiton-vllm-plugin:qwen38-flashnext-rocm10-vllm029-20261010-r1

                                          fcmeF 1 条回复 最后回复
                                          0

                                          你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                          厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                          有了你的建议,这篇帖子会更精彩哦 💗

                                          注册 登录
                                          回复
                                          • 在新帖中回复
                                          登录后回复
                                          • 从旧到新
                                          • 从新到旧
                                          • 最多赞同


                                          • 登录

                                          • 登录或注册以进行搜索。
                                          • 第一个帖子
                                            最后一个帖子
                                          0
                                          • 版块
                                          • 最新
                                          • 标签
                                          • 热门
                                          • 用户
                                          • 群组