跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签 硬件 AI 广场
  1. 主页
  2. 版块
  3. LLM讨论区
  4. 在Mac Mini M4 Pro 64GB 上部署本地模型

在Mac Mini M4 Pro 64GB 上部署本地模型

已定时 已固定 已锁定 已移动 LLM讨论区
本地模型macapple-m4
3 帖子 2 发布者 183 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • Cen KuC 离线
    Cen KuC 离线
    Cen Ku
    发表于 最后由 编辑
    #1

    各位大神好, 我在用Mac Mini M4 Pro 64GB, 想在本地跑大模型和AI Agent, 方案如下

    1. llama.cpp + Qwen3.6-35B-A3B Q4 + Hermes / Pi

    2. rapid-mlx + Qwen3.6-35B-A3B Q4 + Hermes / Pi

    以上都試過, 性能方面方案2較快, 但方案1就比較穩定, 而且也想過再跑comfyUI, 但64GB 不夠用, 有沒有大神有好建議, 如何調整大模型的大小.

    主要想打做個人助理, 能自動化和基礎生圖改圖, 謝謝

    1 条回复 最后回复
    0
    • terryT 离线
      terryT 离线
      terry
      超级版主
      发表于 最后由 编辑
      #2

      Mac跑ComfyUI不仅仅是内存不够,而是芯片算力拉垮,带宽也不够,画图,音频可以玩玩,视频就想多了。即便是画图也比较慢,但肯定可以玩的。有限自己画图的话可以安装draw things门槛很低,不过没有API,无法自动化。
      分开跑,一起跑根本不现实,这小主机AI性能很拉垮。

      油管:https://www.youtube.com/@抡锤者

      1 条回复 最后回复
      0
      • Cen KuC 离线
        Cen KuC 离线
        Cen Ku
        发表于 最后由 编辑
        #3

        明白了, 就想著小玩一下, 分開放是可以有輸出的, 視頻確實不現實, 看來還是deepseek + nano banana, 就是燒一點錢LOL

        1 条回复 最后回复
        0

        你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

        厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

        有了你的建议,这篇帖子会更精彩哦 💗

        注册 登录
        回复
        • 在新帖中回复
        登录后回复
        • 从旧到新
        • 从新到旧
        • 最多赞同


        • 登录

        • 登录或注册以进行搜索。
        • 第一个帖子
          最后一个帖子
        0
        • 版块
        • 最新
        • 标签
        • 热门
        • 用户
        • 群组