跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签 硬件 AI 广场
  1. 主页
  2. 版块
  3. AI硬件
  4. 小小秀一下我的AI RIG

小小秀一下我的AI RIG

已定时 已固定 已锁定 已移动 AI硬件
52 帖子 19 发布者 2.4k 浏览 2 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • FredF 离线
    FredF 离线
    Fred
    德高望重
    发表于 最后由 编辑
    #38

    再补,llama.cpp单卡命令行。
    743adb22-7fbe-4fa4-b2fe-f9edafd884f2-image.jpeg
    和分卡命令行:
    151a7009-e0de-4cdc-8741-4de75dbe0373-image.jpeg
    vllm命令行:
    f1b756bf-c403-465e-9edf-29b6e307492b-image.jpeg

    1 条回复 最后回复
    1
    • terryT terry

      @Fred 抄作业的材料凑足了,又能水一集。

      FredF 离线
      FredF 离线
      Fred
      德高望重
      发表于 最后由 编辑
      #39

      @terry 说:

      @Fred 抄作业的材料凑足了,又能水一集。

      行。这些帖子特哥您看着随便用。

      P 1 条回复 最后回复
      1
      • FredF Fred

        @terry 说:

        @Fred 抄作业的材料凑足了,又能水一集。

        行。这些帖子特哥您看着随便用。

        P 离线
        P 离线
        pilipala
        德高望重 劳动模范
        发表于 最后由 编辑
        #40

        @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

        FredF 1 条回复 最后回复
        0
        • FredF Fred

          来补些图:
          图1:注意看,在下面一层有一个关键设备:大疆POWER 1000。当成一个UPS来用,都花了这么多小钱钱,买了卡买了机器,不要吝啬把电源配得保险一些,别因为电源闪断,或者电压不稳或者突然断电,烧了卡之后还要找修显卡的张哥,就麻烦大了。
          替代文字

          图2:4090显卡,以及狗东999的显卡坞,USB4和Ocuulink双接口,自带800w电源,很不错。但两个特别提醒:

          1. 不要买2个这种同样显卡坞插到同一台主机。因为它有个白痴低级失误:它的雷电UUID好像是固定的,没法改,每个显卡坞都是一样的UUID。因此在Linux下,只能识别一个这种显卡坞。当时我本来是买了2个这个显卡坞,但第二个始终不识别,这个问题当时折腾我好久。最后买了退,退了换,最后换了品牌,有了不同的TB UUID才搞定。着着实实享受了一把狗东的售后服务。
          2. 4090和R9700,都是12PIN+4PIN的PCI-E电源线,这个显卡坞不带这种线,只带3个8PIN线,需要自己买转接,或者显卡如果带也行。
            替代文字

          图3:霸气的绿联显卡坞,自带850W金牌电源,自带12PIN+4PIN,自带8PIN,通吃一切显卡。缺点是不便宜啊,显卡坞2000+的就不算便宜了:
          替代文字

          图4:颜值在线的R9700,这卡是真好看。但它在显卡坞上有个毛病要注意:如果主机不开机,它的风扇会狂转。
          替代文字

          图5图6:主机AI MAX 395,零刻的128G版本,刚去查了一下狗东,狗日的涨价到21000了!我当时买的时候14000。后面带2个10G网口,2个USB4 type-c,前置带指纹解锁(Windows才能用)。我插了2个显卡坞,都是type-c,后面看着也不拥挤,还好。我这个机器是Linux无头服务器,也不用它打游戏啥的,因此随意插了一个hdmi的线到显示器。干干净净的,不挤。
          替代文字
          替代文字

          总结一下几个坑:

          1. 不要买2个同样型号的狗东999显卡坞
          2. R9700外置,如果主机不开,风扇会狂转,此时只能自己去关显卡坞的电源
          3. 尽量上个UPS,对你的几万块的资产稍微好点
          张老师张 离线
          张老师张 离线
          张老师
          劳动模范 德高望重
          发表于 最后由 编辑
          #41

          @Fred 说:

          不要买2个同样型号的狗东999显卡坞

          这个有什么说法吗?插到同一台机器上会Bug?

          FredF 1 条回复 最后回复
          0
          • P pilipala

            @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

            FredF 离线
            FredF 离线
            Fred
            德高望重
            发表于 最后由 编辑
            #42

            @pilipala 说:

            @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

            我在一家叫做天成智算买的,不过还是推荐自营的那两家。我这个的发货过程有点波折,他们一开始给我填了一个错误的单号,第二天就显示我已经收货了,实际上我连毛都没看到,货也显示被发到了浙江某个地址,跟我完全不在一个省。
            后来他们重新填了单号。货到之后我用Linux的gpu-burn工具压测一小时没问题,这几天用下来感觉还是不错,我就给他们确认收货了。

            P 1 条回复 最后回复
            1
            • 张老师张 张老师

              @Fred 说:

              不要买2个同样型号的狗东999显卡坞

              这个有什么说法吗?插到同一台机器上会Bug?

              FredF 离线
              FredF 离线
              Fred
              德高望重
              发表于 最后由 编辑
              #43

              @张老师 说:

              @Fred 说:

              不要买2个同样型号的狗东999显卡坞

              这个有什么说法吗?插到同一台机器上会Bug?

              第二个不识别,用tbctl list命令只能看见第一个。后来我反复测试,发现他们家显卡坞的每个设备UUID都相同。如果2个雷电设备UUID相同,Linux的tb驱动在授权(enroll)雷电设备的时候,是以UUID来区分设备的,结果是第二个没法用uuid授权了。因此我的第二个显卡坞不识别,我也没找到修改uuid的方法(据说是烧录在显卡坞固件的),最后就不折腾了,把第二个退了。

              张老师张 1 条回复 最后回复
              1
              • terryT terry 于 将此主题固定
              • FredF Fred

                @张老师 说:

                @Fred 说:

                不要买2个同样型号的狗东999显卡坞

                这个有什么说法吗?插到同一台机器上会Bug?

                第二个不识别,用tbctl list命令只能看见第一个。后来我反复测试,发现他们家显卡坞的每个设备UUID都相同。如果2个雷电设备UUID相同,Linux的tb驱动在授权(enroll)雷电设备的时候,是以UUID来区分设备的,结果是第二个没法用uuid授权了。因此我的第二个显卡坞不识别,我也没找到修改uuid的方法(据说是烧录在显卡坞固件的),最后就不折腾了,把第二个退了。

                张老师张 离线
                张老师张 离线
                张老师
                劳动模范 德高望重
                发表于 最后由 编辑
                #44

                @Fred 说:

                第二个不识别,用tbctl list命令只能看见第一个。后来我反复测试,发现他们家显卡坞的每个设备UUID都相同。如果2个雷电设备UUID相同,Linux的tb驱动在授权(enroll)雷电设备的时候,是以UUID来区分设备的,结果是第二个没法用uuid授权了。因此我的第二个显卡坞不识别,我也没找到修改uuid的方法(据说是烧录在显卡坞固件的),最后就不折腾了,把第二个退了。

                感谢大神回复,明白了

                1 条回复 最后回复
                0
                • 极 离线
                  极 离线
                  极品青蛙
                  发表于 最后由 编辑
                  #45

                  @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                  mmexport1778824176979.jpg

                  terryT FredF 2 条回复 最后回复
                  0
                  • 极 极品青蛙

                    @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                    mmexport1778824176979.jpg

                    terryT 在线
                    terryT 在线
                    terry
                    超级版主
                    发表于 最后由 terry 编辑
                    #46

                    @极品青蛙 不行,很勉强,系统限制303w,这是linux限制,单8pin就150w,长期满载肯定不行,不用尝试,我的显卡和你一样。必须换显卡坞。显卡用那个什么AI Pro R9700就能扛住。不过你这个显卡坞是一体的,换成其他的性能估计会打折。你看下机器是否带oculink,带的话卖一个oclink显卡坞,或者买个雷电3的。

                    油管:https://www.youtube.com/@抡锤者

                    1 条回复 最后回复
                    0
                    • 极 极品青蛙

                      @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                      mmexport1778824176979.jpg

                      FredF 离线
                      FredF 离线
                      Fred
                      德高望重
                      发表于 最后由 编辑
                      #47

                      @极品青蛙 说:

                      @fred 我零刻gti15用的零刻600w显卡坞,就2个8pin,请教个接7900xtx这3个8pin的方案,豆包和卖家说价买个1分2的线插第二个8pin口,不要求性能发挥满,只要不烧卡就行,感谢!
                      mmexport1778824176979.jpg

                      还是稳妥起见,显卡坞有3个8P才保险。你看这些个帖子吧,很多人反对这样做:https://forums.tomshardware.com/threads/can-i-use-a-3-x-8-pin-7900-xtx-with-only-2-x-8-pins-connected-to-it.3809019/
                      https://linustechtips.com/topic/1475161-is-rx-7900-xtx-able-to-work-from-2-pcie-cables-instead-of-3/

                      1 条回复 最后回复
                      0
                      • Hank WangH 离线
                        Hank WangH 离线
                        Hank Wang
                        发表于 最后由 编辑
                        #48

                        显卡坞有没有可以支持5090这样显卡的?不知道有没有这样用过。

                        terryT 1 条回复 最后回复
                        0
                        • Hank WangH Hank Wang

                          显卡坞有没有可以支持5090这样显卡的?不知道有没有这样用过。

                          terryT 在线
                          terryT 在线
                          terry
                          超级版主
                          发表于 最后由 编辑
                          #49

                          @Hank-Wang 支持随便一个显卡坞都支持,性能损失太大。雷电5,oculink都完全跑不满性能的一半。

                          油管:https://www.youtube.com/@抡锤者

                          1 条回复 最后回复
                          0
                          • 系统 于 取消固定此主题
                          • FredF Fred

                            @pilipala 说:

                            @Fred 老哥的4090是狗东哪家买的,看看是不是一家,我的万一翻车了就买你那家的,还有R9700是1万1入的么?

                            我在一家叫做天成智算买的,不过还是推荐自营的那两家。我这个的发货过程有点波折,他们一开始给我填了一个错误的单号,第二天就显示我已经收货了,实际上我连毛都没看到,货也显示被发到了浙江某个地址,跟我完全不在一个省。
                            后来他们重新填了单号。货到之后我用Linux的gpu-burn工具压测一小时没问题,这几天用下来感觉还是不错,我就给他们确认收货了。

                            P 离线
                            P 离线
                            pilipala
                            德高望重 劳动模范
                            发表于 最后由 编辑
                            #50

                            @Fred @Fred 我的大玩具也装好了,哈哈哈~~

                            1 条回复 最后回复
                            0
                            • terryT terry 于 将此主题固定
                            • 系统 于 取消固定此主题
                            • kos orK 离线
                              kos orK 离线
                              kos or
                              超凡大师
                              发表于 最后由 编辑
                              #51

                              UGreen 顯卡屋真是漂亮 有點像是太空梭發射站一樣 垂直矗立; 我也在考慮要買一個UPS 用電上比較安全 保護AI機台

                              1 条回复 最后回复
                              0
                              • I 离线
                                I 离线
                                iocat
                                发表于 最后由 编辑
                                #52

                                6w可以搞两个dgx spark,感觉也不错

                                1 条回复 最后回复
                                0

                                你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                                有了你的建议,这篇帖子会更精彩哦 💗

                                注册 登录
                                回复
                                • 在新帖中回复
                                登录后回复
                                • 从旧到新
                                • 从新到旧
                                • 最多赞同


                                • 登录

                                • 登录或注册以进行搜索。
                                • 第一个帖子
                                  最后一个帖子
                                0
                                • 版块
                                • 最新
                                • 标签
                                • 热门
                                • 用户
                                • 群组