跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签 硬件 AI 广场
  1. 主页
  2. 版块
  3. LLM讨论区
  4. 有大神在本地部署 GLM 5.2 吗?

有大神在本地部署 GLM 5.2 吗?

已定时 已固定 已锁定 已移动 LLM讨论区
本地模型glm
24 帖子 10 发布者 868 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • 5 566656661

    @terry

    ComfyUI的話個人感覺我交不了貨啊

    畢竟都是在折騰文字模型, 也就是Autoregressive類的

    DiT類的功夫還沒到家 😖

    terryT 离线
    terryT 离线
    terry
    超级版主
    发表于 最后由 编辑
    #15

    @566656661 这个难度我觉得小意思,你试试看,我作为站长不方便参与,要不然我恨不得自己做。

    油管:https://www.youtube.com/@抡锤者

    5 1 条回复 最后回复
    1
    • soop ladiosS soop ladios

      @566656661
      CRS804是4 port 400G QSFP56-DD, 每個port由八條獨立的資料通道組成, 所以可以分出2x200G, 4x100G等等. 買對線就可以接8台或16台DGX spark. 我看TP 8的時候網路流量好像也沒有到100G, 所以接16台應該對速度也沒有影響. 我是買這條線, 接了8台
      螢幕擷取畫面 2026-07-11 232515.png

      5 离线
      5 离线
      566656661
      超凡大师
      发表于 最后由 编辑
      #16

      @soop-ladios

      原來是這樣, 漲知識了

      我還以爲會是類似家用網絡Switch那種, 一個頭接一個裝置

      1 条回复 最后回复
      0
      • terryT terry

        @566656661 这个难度我觉得小意思,你试试看,我作为站长不方便参与,要不然我恨不得自己做。

        5 离线
        5 离线
        566656661
        超凡大师
        发表于 最后由 566656661 编辑
        #17

        @terry

        我在主力電腦上的ComfyUI還是人手打Prompt + 玩, 還沒到自動 😖

        剛剛單純看一下要求的, 已經想到幾個難點是自己沒有想法的

        terryT 1 条回复 最后回复
        1
        • 5 566656661

          @terry

          我在主力電腦上的ComfyUI還是人手打Prompt + 玩, 還沒到自動 😖

          剛剛單純看一下要求的, 已經想到幾個難點是自己沒有想法的

          terryT 离线
          terryT 离线
          terry
          超级版主
          发表于 最后由 编辑
          #18

          @566656661 😢抓紧学习,全能起来,😂

          油管:https://www.youtube.com/@抡锤者

          5 1 条回复 最后回复
          0
          • fcmeF 离线
            fcmeF 离线
            fcme
            技术大牛 劳动模范
            发表于 最后由 编辑
            #19

            这个太不现实了,除非你是视金钱如粪土的富哥。
            现在本地部署说实话还是有点儿尴尬,哪怕是27b这样的模型,哪怕你用的是5090,一到agent使用场景,因为现在毕竟是agent时代了,那个pp速度一慢了你如果要是没做好缓存优化的话,你是根本不会想主力用它的。如果只是聊个天,做一点文本工作聊天窗口那种,然后识别个图啊,OCR的话,我以前那个5070ti就挺好的,升级到5090也就是可以跑的量化精度高一点,但是依然解决不了稠密模型在本地部署情况下的慢的问题。你想27b都如此,那像glm5.2这种庞然大物,本地布属真的意义不大。你可以考虑租个云端的卡试验一下,最终的归宿应该还是调用的时候用API,反正现在智谱的,coding plan也买不到。

            1 条回复 最后回复
            3
            • terryT terry

              @566656661 😢抓紧学习,全能起来,😂

              5 离线
              5 离线
              566656661
              超凡大师
              发表于 最后由 编辑
              #20

              @terry

              很難啦 😰

              Autoregressive類很多技術還沒研究跟實驗, Heretic跟Abliterator的去審查方式還沒實驗過, 微調跟Lora那些還是去看

              1 条回复 最后回复
              1
              • Alexander LeeA 离线
                Alexander LeeA 离线
                Alexander Lee
                德高望重
                发表于 最后由 编辑
                #21

                现在本地也就跑生图和视频现实点,文本大模型还是富哥们的玩具,真要投个几万十几万来搞,够充API到天荒地老了

                1 条回复 最后回复
                3
                • Kk HhK 离线
                  Kk HhK 离线
                  Kk Hh
                  发表于 最后由 编辑
                  #22

                  我觉得还是用云端的挺好 ,GLM5.2的确很强 安全阈值又低 我最近用的也比较疯,OLLAMA CLOUD 应该基本上是最便宜的了。

                  1 条回复 最后回复
                  1
                  • williamlouisW 在线
                    williamlouisW 在线
                    williamlouis
                    超级版主
                    发表于 最后由 编辑
                    #23

                    如果有可跑的项目。可以考虑。为了测测 参数 整一套 没什么意义。结果是可以预测的。肯定不如在线的。

                    个人主页:xlkj.org Telegram https://t.me/xlkjorg

                    1 条回复 最后回复
                    0
                    • U 离线
                      U 离线
                      unafyang
                      发表于 最后由 编辑
                      #24

                      我感觉不如opencode GO,一个月也就10美金,但是可以跑GLM,KIMI,DEEPSEEK,QWEN一小部分,足够我们用了

                      1 条回复 最后回复
                      1

                      你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                      厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

                      有了你的建议,这篇帖子会更精彩哦 💗

                      注册 登录
                      回复
                      • 在新帖中回复
                      登录后回复
                      • 从旧到新
                      • 从新到旧
                      • 最多赞同


                      • 登录

                      • 登录或注册以进行搜索。
                      • 第一个帖子
                        最后一个帖子
                      0
                      • 版块
                      • 最新
                      • 标签
                      • 热门
                      • 用户
                      • 群组