跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场
  1. 主页
  2. 版块
  3. AI硬件
  4. T7910 双卡本地推理全记录:7900 XTX 把两张卡跑掉总线,换 R9700 后大 BAR + P2P 一次打通,最后 4 并发 × 160K 稳跑

T7910 双卡本地推理全记录:7900 XTX 把两张卡跑掉总线,换 R9700 后大 BAR + P2P 一次打通,最后 4 并发 × 160K 稳跑

已定时 已固定 已锁定 已移动 精华 AI硬件
7900xtxr9700多卡部署
32 帖子 9 发布者 981 浏览 2 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题由 X99 不能P2P让我很难受 。 买Pcie switch(260926死缓改判无罪,交换机完美实现P2P 9月27:TP2 Qwen3.8 Q8 60t/s) 分支而来 terry
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • A applejuice

    @张光璞 我就是从x99 跳去 epyc
    我不听 卖家劝 一开始如果上epyc 省2千

    张光璞张
    张光璞张
    张光璞
    技术大牛 劳动模范
    编写于 最后由 编辑
    #16

    @applejuice 说:

    @张光璞 我就是从x99 跳去 epyc
    我不听 卖家劝 一开始如果上epyc 省2千

    x99 适合玩一套最简系统。 一套便宜的老平台,上限还是太低了

    1 条回复 最后回复
    0
    • A applejuice

      电源问题 换个电源还是最简单最保险

      张光璞张
      张光璞张
      张光璞
      技术大牛 劳动模范
      编写于 最后由 编辑
      #17

      @applejuice 说:

      电源问题 换个电源还是最简单最保险

      我买了台达1500 , 但线不够 。

      今天顺丰送到,到了我再试试。

      F L 2 条回复 最后回复
      0
      • 张光璞张 张光璞

        @laobenxiong 说:

        @张光璞 说:
        一句话总结

        这套机器上,两张卡能不能稳跑 TP,不取决于你多会调参,取决于卡 VBIOS 愿不愿意问 BIOS 要那 32 GB;而它稳不稳,往往取决于你有没有在编译期断过电、以及你有没有在数据说「不是热、不是电」的时候,肯换掉自己那个想当然的假设。

        这个帖子关于 rebar 的分析是值得推敲的. kernel rescan 的逻辑相当复杂, 主要是历史原因造成的. 简单说 7900xtx 不能自动 rebar 到 24G(32G) bar 空间好像是有疑问的. 根据我的测试经验, 如果在交换机下游只插一张卡, 24G bar 没有问题. 如果同时插两张卡, 就都退回到 256M. 问题出在 kernel rescan 的逻辑上, 需要 patch内核, 最终是可以做到两张卡都有24G bar size.

        总之, 这个帖子给了一组测试的实际表现, 是值得借鉴的. 但如果要把这些结果直接外推到其它场景, 就需要一定的判断力了.

        我现在把系统回归到在单机了,等有空了再测试单张卡的效果。

        L
        L
        laobenxiong
        德高望重 劳动模范
        编写于 最后由 编辑
        #18

        @张光璞 说:

        @laobenxiong 说:

        我现在把系统回归到在单机了,等有空了再测试单张卡的效果。

        对了, 你那个"交换机下游 4 跳只跑 Gen2(5 GT/s)"是怎么回事? gen4的交换机, gen4的卡(7900xtx), 走线都在PCB上, 为啥只能到 gen2?

        张光璞张 2 条回复 最后回复
        0
        • 张光璞张 张光璞

          @applejuice 说:

          电源问题 换个电源还是最简单最保险

          我买了台达1500 , 但线不够 。

          今天顺丰送到,到了我再试试。

          F
          F
          fcys
          德高望重
          编写于 最后由 编辑
          #19

          @张光璞 你买的这个电源12v是分路的吧?不要迷信台达,现在的卡就认准atx3.0或者3.1。优先3.0,3.1是因为3.0太难过了,退出的降级标准,安全电压范围放宽,保持时间缩短。

          张光璞张 1 条回复 最后回复
          0
          • 张光璞张 张光璞

            @applejuice 说:

            电源问题 换个电源还是最简单最保险

            我买了台达1500 , 但线不够 。

            今天顺丰送到,到了我再试试。

            L
            L
            laobenxiong
            德高望重 劳动模范
            编写于 最后由 编辑
            #20

            @张光璞 说:

            @applejuice 说:

            电源问题 换个电源还是最简单最保险

            我买了台达1500 , 但线不够 。

            今天顺丰送到,到了我再试试。

            我这里蓝宝石的1200W带两张7900xtx目前没碰到问题: 一张卡用 12VHPWR转3个8pin(外加MB 24pin给槽供电), 另一张卡用3xpcie 8pin (外加 cpu转pcie给槽供电).

            1 条回复 最后回复
            0
            • F fcys

              @张光璞 你买的这个电源12v是分路的吧?不要迷信台达,现在的卡就认准atx3.0或者3.1。优先3.0,3.1是因为3.0太难过了,退出的降级标准,安全电压范围放宽,保持时间缩短。

              张光璞张
              张光璞张
              张光璞
              技术大牛 劳动模范
              编写于 最后由 编辑
              #21

              @fcys 说:

              @张光璞 你买的这个电源12v是分路的吧?不要迷信台达,现在的卡就认准atx3.0或者3.1。优先3.0,3.1是因为3.0太难过了,退出的降级标准,安全电压范围放宽,保持时间缩短。

              台达主要是便宜 , 1500W 1099元。有6个6pin 正好分给2个显卡。

              实在不行就只有限制频率,并且调低内核电压了

              1 条回复 最后回复
              0
              • L laobenxiong

                @张光璞 说:

                @laobenxiong 说:

                我现在把系统回归到在单机了,等有空了再测试单张卡的效果。

                对了, 你那个"交换机下游 4 跳只跑 Gen2(5 GT/s)"是怎么回事? gen4的交换机, gen4的卡(7900xtx), 走线都在PCB上, 为啥只能到 gen2?

                张光璞张
                张光璞张
                张光璞
                技术大牛 劳动模范
                编写于 最后由 编辑
                #22
                此主題已被删除!
                1 条回复 最后回复
                0
                • A
                  A
                  applejuice
                  技术大牛 劳动模范
                  编写于 最后由 编辑
                  #23

                  电源这东西有点奇怪
                  我用长城1200w 没问题 但是这里网友同一个配资 3090x2 长城1200w 却瞬间跳闸
                  所以我换了superflower

                  张光璞张 1 条回复 最后回复
                  0
                  • L laobenxiong

                    @张光璞 说:

                    @laobenxiong 说:

                    我现在把系统回归到在单机了,等有空了再测试单张卡的效果。

                    对了, 你那个"交换机下游 4 跳只跑 Gen2(5 GT/s)"是怎么回事? gen4的交换机, gen4的卡(7900xtx), 走线都在PCB上, 为啥只能到 gen2?

                    张光璞张
                    张光璞张
                    张光璞
                    技术大牛 劳动模范
                    编写于 最后由 编辑
                    #24

                    @laobenxiong 说:

                    @张光璞 说:

                    @laobenxiong 说:

                    我现在把系统回归到在单机了,等有空了再测试单张卡的效果。

                    对了, 你那个"交换机下游 4 跳只跑 Gen2(5 GT/s)"是怎么回事? gen4的交换机, gen4的卡(7900xtx), 走线都在PCB上, 为啥只能到 gen2?

                    我的pcie switch 交换机引出卡插槽是 gen3 x 4
                    image.jpeg

                    1 条回复 最后回复
                    0
                    • A applejuice

                      电源这东西有点奇怪
                      我用长城1200w 没问题 但是这里网友同一个配资 3090x2 长城1200w 却瞬间跳闸
                      所以我换了superflower

                      张光璞张
                      张光璞张
                      张光璞
                      技术大牛 劳动模范
                      编写于 最后由 编辑
                      #25

                      @applejuice 说:

                      电源这东西有点奇怪
                      我用长城1200w 没问题 但是这里网友同一个配资 3090x2 长城1200w 却瞬间跳闸
                      所以我换了superflower

                      主要在看瞬间大电流能不能顶得住了。我刚开始的时候只要问模型一句: 你好。 直接重启。

                      1 条回复 最后回复
                      0
                      • ,系统 取消固定了此主题
                      • F fcys

                        @terry 说实话双RDNA3跑起来没什么问题,楼主掉卡大概率是7910的1300w电源顶不住。7900xtx的瞬时功耗过高是出了名的,这卡刚上市的时候因为掉驱动的情况过渡,所以有很多峰值功率的实测,我记得单卡瞬时是能跑到700w的。我也是双RDNA3用了2000w电源,另外pcie通道确实要直连CPU。

                        stxpnetS
                        stxpnetS
                        stxpnet
                        超凡大师
                        编写于 最后由 编辑
                        #26

                        @fcys 对,我的显卡之前爆灯,也问过AI,AI说虽然能限制功耗,但是显卡还是会在尖峰的时候有微秒级的高功耗,可能 打穿功耗墙,长时间运行,电源可能比较危险。

                        双卡3090 PCIE 4.0 16X/16X

                        白天(宰相) Strata QFN3.8 IQ4_XS 262K ~120 t/s
                        夜间(将军) vllm+swift 1.5 27B INT4-W4A8-dflash2 188K X 2 ~85 t/s
                        1 条回复 最后回复
                        0
                        • 懒人烘培懒
                          懒人烘培懒
                          懒人烘培
                          德高望重 劳动模范
                          编写于 最后由 编辑
                          #27

                          可能和电源有关,我那7500F去带两张7900XTX,1200w电源完全能顶得住,观察显卡功耗(电源功率计查看)可能会瞬时到400W,然后回落,我看整机满载的时候最大值为980W,然后马上回落在900W左右

                          双 7900 XTX:模型本地跑,Token 随便烧!

                          张光璞张 1 条回复 最后回复
                          0
                          • ,XiaoteX Xiaote 引用了 此主题
                          • 懒人烘培懒 懒人烘培

                            可能和电源有关,我那7500F去带两张7900XTX,1200w电源完全能顶得住,观察显卡功耗(电源功率计查看)可能会瞬时到400W,然后回落,我看整机满载的时候最大值为980W,然后马上回落在900W左右

                            张光璞张
                            张光璞张
                            张光璞
                            技术大牛 劳动模范
                            编写于 最后由 编辑
                            #28

                            @懒人烘培 说:

                            可能和电源有关,我那7500F去带两张7900XTX,1200w电源完全能顶得住,观察显卡功耗(电源功率计查看)可能会瞬时到400W,然后回落,我看整机满载的时候最大值为980W,然后马上回落在900W左右

                            不止400w 。多并发思考的瞬间感觉显卡功率是额定功率的近2倍。但也是毫秒级的。

                            懒人烘培懒 1 条回复 最后回复
                            1
                            • F
                              F
                              flyer666
                              技术大牛
                              编写于 最后由 编辑
                              #29

                              我的sglang 双卡7900xtx用的是1200w的海韵,其中每张卡还有一个6pin一转2和12pin一转二都没有问题。我觉得贴主的问题可能是pcie switch供电不太好。

                              A 张光璞张 2 条回复 最后回复
                              0
                              • F flyer666

                                我的sglang 双卡7900xtx用的是1200w的海韵,其中每张卡还有一个6pin一转2和12pin一转二都没有问题。我觉得贴主的问题可能是pcie switch供电不太好。

                                A
                                A
                                applejuice
                                技术大牛 劳动模范
                                编写于 最后由 编辑
                                #30

                                @flyer666 照理说现在的卡不从主板拿电了 但是我也不敢打包票

                                1 条回复 最后回复
                                0
                                • F flyer666

                                  我的sglang 双卡7900xtx用的是1200w的海韵,其中每张卡还有一个6pin一转2和12pin一转二都没有问题。我觉得贴主的问题可能是pcie switch供电不太好。

                                  张光璞张
                                  张光璞张
                                  张光璞
                                  技术大牛 劳动模范
                                  编写于 最后由 编辑
                                  #31

                                  @flyer666 说:

                                  我的sglang 双卡7900xtx用的是1200w的海韵,其中每张卡还有一个6pin一转2和12pin一转二都没有问题。我觉得贴主的问题可能是pcie switch供电不太好。

                                  现在台达1500 只供pcie-switch 以及他身上的两块7900xtx. 已经稳定运行OK了。

                                  只是现在又出了新框架,正在跑单张的 qwen3.8 flash

                                  1 条回复 最后回复
                                  0
                                  • 张光璞张 张光璞

                                    @懒人烘培 说:

                                    可能和电源有关,我那7500F去带两张7900XTX,1200w电源完全能顶得住,观察显卡功耗(电源功率计查看)可能会瞬时到400W,然后回落,我看整机满载的时候最大值为980W,然后马上回落在900W左右

                                    不止400w 。多并发思考的瞬间感觉显卡功率是额定功率的近2倍。但也是毫秒级的。

                                    懒人烘培懒
                                    懒人烘培懒
                                    懒人烘培
                                    德高望重 劳动模范
                                    编写于 最后由 编辑
                                    #32

                                    @张光璞 哦,明白了,你是多并发,我就单任务满载。不过我在写文章测试的时候就用了多并发,功率计和系统同时看整机功率,都是小于1千瓦的,这个就没有搞懂了,我知道我那U可能省点电吧

                                    双 7900 XTX:模型本地跑,Token 随便烧!

                                    1 条回复 最后回复
                                    0

                                    你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                    厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                    有了你的建议,这篇帖子会更精彩哦 💗

                                    注册 登录
                                    回复
                                    • 在新帖中回复
                                    登录后回复
                                    • 从旧到新
                                    • 从新到旧
                                    • 最多赞同


                                    • 登录

                                    • 登录或注册以进行搜索。
                                    • 第一个帖子
                                      最后一个帖子
                                    0
                                    • 版块
                                    • 最新
                                    • 标签
                                    • 热门
                                    • 用户
                                    • 群组