跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. AI硬件
  3. 小小秀一下我的AI RIG

小小秀一下我的AI RIG

已定时 已固定 已锁定 已移动 AI硬件
50 帖子 17 发布者 763 浏览 2 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • FredF 离线
    FredF 离线
    Fred
    编写于 最后由 编辑
    #38

    再补,llama.cpp单卡命令行。
    743adb22-7fbe-4fa4-b2fe-f9edafd884f2-image.jpeg
    和分卡命令行:
    151a7009-e0de-4cdc-8741-4de75dbe0373-image.jpeg
    vllm命令行:
    f1b756bf-c403-465e-9edf-29b6e307492b-image.jpeg

    1 条回复 最后回复
    1
    • terryT terry

      @Fred 抄作业的材料凑足了,又能水一集。

      FredF 离线
      FredF 离线
      Fred
      编写于 最后由 编辑
      #39

      @terry 说:

      @Fred 抄作业的材料凑足了,又能水一集。

      行。这些帖子特哥您看着随便用。

      P 1 条回复 最后回复
      1
      • FredF Fred

        @terry 说:

        @Fred 抄作业的材料凑足了,又能水一集。

        行。这些帖子特哥您看着随便用。

        P 离线
        P 离线
        pilipala
        编写于 最后由 编辑
        #40

        @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

        FredF 1 条回复 最后回复
        0
        • FredF Fred

          来补些图:
          图1:注意看,在下面一层有一个关键设备:大疆POWER 1000。当成一个UPS来用,都花了这么多小钱钱,买了卡买了机器,不要吝啬把电源配得保险一些,别因为电源闪断,或者电压不稳或者突然断电,烧了卡之后还要找修显卡的张哥,就麻烦大了。
          替代文字

          图2:4090显卡,以及狗东999的显卡坞,USB4和Ocuulink双接口,自带800w电源,很不错。但两个特别提醒:

          1. 不要买2个这种同样显卡坞插到同一台主机。因为它有个白痴低级失误:它的雷电UUID好像是固定的,没法改,每个显卡坞都是一样的UUID。因此在Linux下,只能识别一个这种显卡坞。当时我本来是买了2个这个显卡坞,但第二个始终不识别,这个问题当时折腾我好久。最后买了退,退了换,最后换了品牌,有了不同的TB UUID才搞定。着着实实享受了一把狗东的售后服务。
          2. 4090和R9700,都是12PIN+4PIN的PCI-E电源线,这个显卡坞不带这种线,只带3个8PIN线,需要自己买转接,或者显卡如果带也行。
            替代文字

          图3:霸气的绿联显卡坞,自带850W金牌电源,自带12PIN+4PIN,自带8PIN,通吃一切显卡。缺点是不便宜啊,显卡坞2000+的就不算便宜了:
          替代文字

          图4:颜值在线的R9700,这卡是真好看。但它在显卡坞上有个毛病要注意:如果主机不开机,它的风扇会狂转。
          替代文字

          图5图6:主机AI MAX 395,零刻的128G版本,刚去查了一下狗东,狗日的涨价到21000了!我当时买的时候14000。后面带2个10G网口,2个USB4 type-c,前置带指纹解锁(Windows才能用)。我插了2个显卡坞,都是type-c,后面看着也不拥挤,还好。我这个机器是Linux无头服务器,也不用它打游戏啥的,因此随意插了一个hdmi的线到显示器。干干净净的,不挤。
          替代文字
          替代文字

          总结一下几个坑:

          1. 不要买2个同样型号的狗东999显卡坞
          2. R9700外置,如果主机不开,风扇会狂转,此时只能自己去关显卡坞的电源
          3. 尽量上个UPS,对你的几万块的资产稍微好点
          张老师张 离线
          张老师张 离线
          张老师
          编写于 最后由 编辑
          #41

          @Fred 说:

          不要买2个同样型号的狗东999显卡坞

          这个有什么说法吗?插到同一台机器上会Bug?

          FredF 1 条回复 最后回复
          0
          • P pilipala

            @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

            FredF 离线
            FredF 离线
            Fred
            编写于 最后由 编辑
            #42

            @pilipala 说:

            @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

            我在一家叫做天成智算买的,不过还是推荐自营的那两家。我这个的发货过程有点波折,他们一开始给我填了一个错误的单号,第二天就显示我已经收货了,实际上我连毛都没看到,货也显示被发到了浙江某个地址,跟我完全不在一个省。
            后来他们重新填了单号。货到之后我用Linux的gpu-burn工具压测一小时没问题,这几天用下来感觉还是不错,我就给他们确认收货了。

            P 1 条回复 最后回复
            1
            • 张老师张 张老师

              @Fred 说:

              不要买2个同样型号的狗东999显卡坞

              这个有什么说法吗?插到同一台机器上会Bug?

              FredF 离线
              FredF 离线
              Fred
              编写于 最后由 编辑
              #43

              @张老师 说:

              @Fred 说:

              不要买2个同样型号的狗东999显卡坞

              这个有什么说法吗?插到同一台机器上会Bug?

              第二个不识别,用tbctl list命令只能看见第一个。后来我反复测试,发现他们家显卡坞的每个设备UUID都相同。如果2个雷电设备UUID相同,Linux的tb驱动在授权(enroll)雷电设备的时候,是以UUID来区分设备的,结果是第二个没法用uuid授权了。因此我的第二个显卡坞不识别,我也没找到修改uuid的方法(据说是烧录在显卡坞固件的),最后就不折腾了,把第二个退了。

              张老师张 1 条回复 最后回复
              1
              • terryT terry 固定了该主题
              • FredF Fred

                @张老师 说:

                @Fred 说:

                不要买2个同样型号的狗东999显卡坞

                这个有什么说法吗?插到同一台机器上会Bug?

                第二个不识别,用tbctl list命令只能看见第一个。后来我反复测试,发现他们家显卡坞的每个设备UUID都相同。如果2个雷电设备UUID相同,Linux的tb驱动在授权(enroll)雷电设备的时候,是以UUID来区分设备的,结果是第二个没法用uuid授权了。因此我的第二个显卡坞不识别,我也没找到修改uuid的方法(据说是烧录在显卡坞固件的),最后就不折腾了,把第二个退了。

                张老师张 离线
                张老师张 离线
                张老师
                编写于 最后由 编辑
                #44

                @Fred 说:

                第二个不识别,用tbctl list命令只能看见第一个。后来我反复测试,发现他们家显卡坞的每个设备UUID都相同。如果2个雷电设备UUID相同,Linux的tb驱动在授权(enroll)雷电设备的时候,是以UUID来区分设备的,结果是第二个没法用uuid授权了。因此我的第二个显卡坞不识别,我也没找到修改uuid的方法(据说是烧录在显卡坞固件的),最后就不折腾了,把第二个退了。

                感谢大神回复,明白了

                1 条回复 最后回复
                0
                • 极 离线
                  极 离线
                  极品青蛙
                  编写于 最后由 编辑
                  #45

                  @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                  mmexport1778824176979.jpg

                  terryT FredF 2 条回复 最后回复
                  0
                  • 极 极品青蛙

                    @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                    mmexport1778824176979.jpg

                    terryT 离线
                    terryT 离线
                    terry
                    编写于 最后由 terry 编辑
                    #46

                    @极品青蛙 不行,很勉强,系统限制303w,这是linux限制,单8pin就150w,长期满载肯定不行,不用尝试,我的显卡和你一样。必须换显卡坞。显卡用那个什么AI Pro R9700就能扛住。不过你这个显卡坞是一体的,换成其他的性能估计会打折。你看下机器是否带oculink,带的话卖一个oclink显卡坞,或者买个雷电3的。

                    1 条回复 最后回复
                    0
                    • 极 极品青蛙

                      @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                      mmexport1778824176979.jpg

                      FredF 离线
                      FredF 离线
                      Fred
                      编写于 最后由 编辑
                      #47

                      @极品青蛙 说:

                      @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                      mmexport1778824176979.jpg

                      还是稳妥起见,显卡坞有3个8P才保险。你看这些个帖子吧,很多人反对这样做:https://forums.tomshardware.com/threads/can-i-use-a-3-x-8-pin-7900-xtx-with-only-2-x-8-pins-connected-to-it.3809019/
                      https://linustechtips.com/topic/1475161-is-rx-7900-xtx-able-to-work-from-2-pcie-cables-instead-of-3/

                      1 条回复 最后回复
                      0
                      • Hank WangH 离线
                        Hank WangH 离线
                        Hank Wang
                        编写于 最后由 编辑
                        #48

                        显卡坞有没有可以支持5090这样显卡的?不知道有没有这样用过。

                        terryT 1 条回复 最后回复
                        0
                        • Hank WangH Hank Wang

                          显卡坞有没有可以支持5090这样显卡的?不知道有没有这样用过。

                          terryT 离线
                          terryT 离线
                          terry
                          编写于 最后由 编辑
                          #49

                          @Hank-Wang 支持随便一个显卡坞都支持,性能损失太大。雷电5,oculink都完全跑不满性能的一半。

                          1 条回复 最后回复
                          0
                          • 系统 取消固定了该主题
                          • FredF Fred

                            @pilipala 说:

                            @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

                            我在一家叫做天成智算买的,不过还是推荐自营的那两家。我这个的发货过程有点波折,他们一开始给我填了一个错误的单号,第二天就显示我已经收货了,实际上我连毛都没看到,货也显示被发到了浙江某个地址,跟我完全不在一个省。
                            后来他们重新填了单号。货到之后我用Linux的gpu-burn工具压测一小时没问题,这几天用下来感觉还是不错,我就给他们确认收货了。

                            P 离线
                            P 离线
                            pilipala
                            编写于 最后由 编辑
                            #50

                            @Fred @Fred 我的大玩具也装好了,哈哈哈~~

                            1 条回复 最后回复
                            0
                            • terryT terry 固定了该主题
                            • 系统 取消固定了该主题

                            你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                            厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                            有了你的建议,这篇帖子会更精彩哦 💗

                            注册 登录
                            回复
                            • 在新帖中回复
                            登录后回复
                            • 从旧到新
                            • 从新到旧
                            • 最多赞同


                            • 登录

                            • 没有帐号? 注册

                            • 登录或注册以进行搜索。
                            • 第一个帖子
                              最后一个帖子
                            0
                            • 版块
                            • 最新
                            • 标签
                            • 热门
                            • 用户
                            • 群组