跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
品牌标识

抡锤者

  1. 主页
  2. LLM讨论区
  3. 有大神在本地部署 GLM 5.2 吗?

有大神在本地部署 GLM 5.2 吗?

已定时 已固定 已锁定 已移动 LLM讨论区
24 帖子 10 发布者 408 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • 5 566656661

    @terry

    ComfyUI的話個人感覺我交不了貨啊

    畢竟都是在折騰文字模型, 也就是Autoregressive類的

    DiT類的功夫還沒到家 😖

    terryT 离线
    terryT 离线
    terry
    超级版主
    编写于 最后由 编辑
    #15

    @566656661 这个难度我觉得小意思,你试试看,我作为站长不方便参与,要不然我恨不得自己做。

    油管:https://www.youtube.com/@抡锤者

    5 1 条回复 最后回复
    1
    • soop ladiosS soop ladios

      @566656661
      CRS804是4 port 400G QSFP56-DD, 每個port由八條獨立的資料通道組成, 所以可以分出2x200G, 4x100G等等. 買對線就可以接8台或16台DGX spark. 我看TP 8的時候網路流量好像也沒有到100G, 所以接16台應該對速度也沒有影響. 我是買這條線, 接了8台
      螢幕擷取畫面 2026-07-11 232515.png

      5 离线
      5 离线
      566656661
      超凡大师
      编写于 最后由 编辑
      #16

      @soop-ladios

      原來是這樣, 漲知識了

      我還以爲會是類似家用網絡Switch那種, 一個頭接一個裝置

      1 条回复 最后回复
      0
      • terryT terry

        @566656661 这个难度我觉得小意思,你试试看,我作为站长不方便参与,要不然我恨不得自己做。

        5 离线
        5 离线
        566656661
        超凡大师
        编写于 最后由 566656661 编辑
        #17

        @terry

        我在主力電腦上的ComfyUI還是人手打Prompt + 玩, 還沒到自動 😖

        剛剛單純看一下要求的, 已經想到幾個難點是自己沒有想法的

        terryT 1 条回复 最后回复
        1
        • 5 566656661

          @terry

          我在主力電腦上的ComfyUI還是人手打Prompt + 玩, 還沒到自動 😖

          剛剛單純看一下要求的, 已經想到幾個難點是自己沒有想法的

          terryT 离线
          terryT 离线
          terry
          超级版主
          编写于 最后由 编辑
          #18

          @566656661 😢抓紧学习,全能起来,😂

          油管:https://www.youtube.com/@抡锤者

          5 1 条回复 最后回复
          0
          • fcmeF 离线
            fcmeF 离线
            fcme
            技术大牛 劳动模范
            编写于 最后由 编辑
            #19

            这个太不现实了,除非你是视金钱如粪土的富哥。
            现在本地部署说实话还是有点儿尴尬,哪怕是27b这样的模型,哪怕你用的是5090,一到agent使用场景,因为现在毕竟是agent时代了,那个pp速度一慢了你如果要是没做好缓存优化的话,你是根本不会想主力用它的。如果只是聊个天,做一点文本工作聊天窗口那种,然后识别个图啊,OCR的话,我以前那个5070ti就挺好的,升级到5090也就是可以跑的量化精度高一点,但是依然解决不了稠密模型在本地部署情况下的慢的问题。你想27b都如此,那像glm5.2这种庞然大物,本地布属真的意义不大。你可以考虑租个云端的卡试验一下,最终的归宿应该还是调用的时候用API,反正现在智谱的,coding plan也买不到。

            1 条回复 最后回复
            3
            • terryT terry

              @566656661 😢抓紧学习,全能起来,😂

              5 离线
              5 离线
              566656661
              超凡大师
              编写于 最后由 编辑
              #20

              @terry

              很難啦 😰

              Autoregressive類很多技術還沒研究跟實驗, Heretic跟Abliterator的去審查方式還沒實驗過, 微調跟Lora那些還是去看

              1 条回复 最后回复
              1
              • Alexander LeeA 离线
                Alexander LeeA 离线
                Alexander Lee
                德高望重
                编写于 最后由 编辑
                #21

                现在本地也就跑生图和视频现实点,文本大模型还是富哥们的玩具,真要投个几万十几万来搞,够充API到天荒地老了

                1 条回复 最后回复
                3
                • Kk HhK 离线
                  Kk HhK 离线
                  Kk Hh
                  编写于 最后由 编辑
                  #22

                  我觉得还是用云端的挺好 ,GLM5.2的确很强 安全阈值又低 我最近用的也比较疯,OLLAMA CLOUD 应该基本上是最便宜的了。

                  1 条回复 最后回复
                  1
                  • williamlouisW 离线
                    williamlouisW 离线
                    williamlouis
                    超级版主
                    编写于 最后由 编辑
                    #23

                    如果有可跑的项目。可以考虑。为了测测 参数 整一套 没什么意义。结果是可以预测的。肯定不如在线的。

                    个人主页:xlkj.org Telegram https://t.me/xlkjorg

                    1 条回复 最后回复
                    0
                    • U 离线
                      U 离线
                      unafyang
                      编写于 最后由 编辑
                      #24

                      我感觉不如opencode GO,一个月也就10美金,但是可以跑GLM,KIMI,DEEPSEEK,QWEN一小部分,足够我们用了

                      1 条回复 最后回复
                      1

                      你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                      厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                      有了你的建议,这篇帖子会更精彩哦 💗

                      注册 登录
                      回复
                      • 在新帖中回复
                      登录后回复
                      • 从旧到新
                      • 从新到旧
                      • 最多赞同


                      • 登录

                      • 没有帐号? 注册

                      • 登录或注册以进行搜索。
                      • 第一个帖子
                        最后一个帖子
                      0
                      • 版块
                      • 最新
                      • 标签
                      • 热门
                      • 用户
                      • 群组