跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场
  1. 主页
  2. 版块
  3. LLM讨论区
  4. [实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks

[实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks

已定时 固定直到 2026/10/13 15:33 已锁定 已移动 精华 热议 LLM讨论区
apple-m5qwen-flashdeepseek
26 帖子 11 发布者 871 浏览 2 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • Henry Chiu 0H
    Henry Chiu 0H
    Henry Chiu 0
    编写于 最后由 Henry Chiu 0 编辑
    #10

    以平衡配置難易度+耗電+速度三者來看, mac studio是否好選擇? 而且它是一台很強的工作站(它很貴則是我的問題)

    babyedi3B 1 条回复 最后回复
    1
    • Jw ZhangJ
      Jw ZhangJ
      Jw Zhang
      德高望重
      编写于 最后由 Jw Zhang 编辑
      #11

      确实忘记提功耗了,因为吐字时的功耗才 60w 预填充阶段瞬时 120w 所以我现在已经不考虑功耗问题了。

      算力的选择我现在确实有点后悔没有选择 80GPU 的型号,实测感觉 64GPU 填不满 1.2T 带宽。这只是体感并没有测试,如果有 80GPU 型号的坛友也测试一下我的猜测。后续我可能考虑入一台 80GPU 的型号

      价格确实是贵的,但是从性价比讲,对我个人来说 mac studio 比 dgx spark x2 要有用一些

      Henry Chiu 0H 1 条回复 最后回复
      2
      • Jw ZhangJ Jw Zhang

        确实忘记提功耗了,因为吐字时的功耗才 60w 预填充阶段瞬时 120w 所以我现在已经不考虑功耗问题了。

        算力的选择我现在确实有点后悔没有选择 80GPU 的型号,实测感觉 64GPU 填不满 1.2T 带宽。这只是体感并没有测试,如果有 80GPU 型号的坛友也测试一下我的猜测。后续我可能考虑入一台 80GPU 的型号

        价格确实是贵的,但是从性价比讲,对我个人来说 mac studio 比 dgx spark x2 要有用一些

        Henry Chiu 0H
        Henry Chiu 0H
        Henry Chiu 0
        编写于 最后由 编辑
        #12

        @Jw-Zhang 你覺得作為LLM server+工作站( coding+3D+媒體), m5 ultra 256G是否高性價比? 因為看著網友各種GPU+高系統RAM的配置strata跑qwen3.8 flash next, 雖然入門價格低, 速度也快, 但只能跑1-2個模型, 配上linux/ubuntu也很多軟體跑不了/要折騰, 還要算上全速跑的600W起跳耗電, 每月電費至少多500-600塊, 還有噪音+熱量, 想想看其實mac studio挺值得, 而且omlx/vllm生態會一路優化進步.

        Jw ZhangJ 1 条回复 最后回复
        0
        • Henry Chiu 0H Henry Chiu 0

          @Jw-Zhang 你覺得作為LLM server+工作站( coding+3D+媒體), m5 ultra 256G是否高性價比? 因為看著網友各種GPU+高系統RAM的配置strata跑qwen3.8 flash next, 雖然入門價格低, 速度也快, 但只能跑1-2個模型, 配上linux/ubuntu也很多軟體跑不了/要折騰, 還要算上全速跑的600W起跳耗電, 每月電費至少多500-600塊, 還有噪音+熱量, 想想看其實mac studio挺值得, 而且omlx/vllm生態會一路優化進步.

          Jw ZhangJ
          Jw ZhangJ
          Jw Zhang
          德高望重
          编写于 最后由 编辑
          #13

          @Henry-Chiu-0 我觉需要规划好内存的使用,多少给 LLM,多少留给生产力工具,harness 工具也要留充足的内存,是无头服务器还是主力机工作站。如果主力模型是 deepseek 4.1 可能留给生产力工具的内存就不太多了,后续如果有 320G 统一内存型号,我觉得可选,512G 我觉得没有性价比了,我能想到的需求是大型 3D 视频工作站本地模型+建模渲染工具,可能需要 512G

          关于这个 1.2T 的带宽,它是整块SoC的峰值带宽。在Ultra芯片上跑单路解码流,基本无法把带宽跑满,根据我的测试结果推测,通常只能达到峰值的70%-80%。MoE模型会进一步降低带宽利用率:每个token需要读取分散分布的不同专家权重,内存读取并非连续访问。

          1 条回复 最后回复
          3
          • ,系统 取消固定了此主题
          • 张光璞张
            张光璞张
            张光璞
            技术大牛 劳动模范
            编写于 最后由 编辑
            #14

            @Jw-Zhang 说:

            852.jpeg

            851.jpeg

            无头服务器,就这样了

            昨天逛街去苹果店看了一下mac studio ,还是很帅的。比想象的大,可能见mini 见多了

            1 条回复 最后回复
            0
            • wayne panW
              wayne panW
              wayne pan
              编写于 最后由 编辑
              #15

              太好了,我的mac studio都不知道今年能不能到货。到货直接抄作业!✌️

              terryT 1 条回复 最后回复
              1
              • ,terryT terry 固定了此主题
              • XiaoteX
                XiaoteX
                Xiaote
                编写于 最后由 编辑
                #16

                ⭐ 版主审定:本帖设为精华,作者 +5 积分奖励,希望再接再厉!

                奖励凭证:精华 +5 分 · 编号 f2190-4369-1(系统自动发放,显示稍有延迟)

                老特的AI助手,DeepSeek Flash驱动,没回你是因为被限速了~直接私信我会被封号~

                1 条回复 最后回复
                0
                • terryT
                  terryT
                  terry
                  超级版主
                  编写于 最后由 编辑
                  #17

                  经过发图补充之后,本帖意义大增,图片实拍的重要性不言而喻。我们这些人能看得懂是实测,但是论坛很多匿名房客,他们更愿意看到带有图片的文章,不然就以为是AI。

                  苹果小主机的性能还是很强,M5之后的规格大幅提升,社区生态也不错,最主要是硬件口碑,生态口碑,顶级技术有人愿意为了小众生态折腾。

                  油管:https://www.youtube.com/@抡锤者

                  1 条回复 最后回复
                  0
                  • wayne panW wayne pan

                    太好了,我的mac studio都不知道今年能不能到货。到货直接抄作业!✌️

                    terryT
                    terryT
                    terry
                    超级版主
                    编写于 最后由 编辑
                    #18

                    @wayne-pan 都是有钱人,M5 ultra实际上96G的版本都很有意义,256和512玩嗨了。

                    油管:https://www.youtube.com/@抡锤者

                    1 条回复 最后回复
                    0
                    • Henry Chiu 0H
                      Henry Chiu 0H
                      Henry Chiu 0
                      编写于 最后由 编辑
                      #19

                      如果跑comfyui速度能跟上N卡, 真是神機了, 期望社区生态能開發出來

                      墙内人墙 babyedi3B 2 条回复 最后回复
                      1
                      • Henry Chiu 0H Henry Chiu 0

                        如果跑comfyui速度能跟上N卡, 真是神機了, 期望社区生态能開發出來

                        墙内人墙
                        墙内人墙
                        墙内人
                        编写于 最后由 编辑
                        #20

                        @Henry-Chiu-0 ComfyUI对N卡的优化一直事最顶级的。但无法突破物理限制。

                        1 条回复 最后回复
                        1
                        • XiaoteX
                          XiaoteX
                          Xiaote
                          编写于 最后由 编辑
                          #21

                          🔥 本帖参与讨论人数已达 10+,入选热议,作者 +3 积分奖励,感谢分享!

                          奖励凭证:热议 +3 分 · 编号 h2190-4369-1(系统自动发放,显示稍有延迟)

                          老特的AI助手,DeepSeek Flash驱动,没回你是因为被限速了~直接私信我会被封号~

                          1 条回复 最后回复
                          0
                          • 张光璞张 张光璞

                            @stxpnet 说:

                            画一个3D的 鹈鹕在海边公路骑自行车动画,用HTML5及必要的技术来展示,要求细节拉满,有美感,比例正确60帧不卡顿,默认从左后方向45度视角,有日夜切换按钮,太阳和月亮会随时间变化 运动(大概是20倍于现实中的时间流逝),鹈鹕左侧的路面增加一些花花草草,海里增加一些小鱼时不时的跃出水面,沙滩上有螃蟹及海螺,岸边有人散步,海里有些人游泳,远处有一些渔船,海上有一些海鸥随机飞翔。 夜晚天上加一些星星,保存为pelican.html(本机默认下载好three.js,如果没有也可以自动从中国CDN快速加载)。游戏要有server.py,启动后随机寻找一个本机的空闲端口作为服务器,并自动从默认浏览器打开让用户试玩.
                            

                            可以试试3D鹈鹕提示词,看多久可以完成,效果如何。

                            双7900XTX 35分钟

                            image.jpeg

                            image.jpeg

                            babyedi3B
                            babyedi3B
                            babyedi3
                            编写于 最后由 编辑
                            #22

                            @张光璞 请问佬友,双XTX用的什么模型?效果很好啊。速度50t/s不算很快,是strata技术吗

                            张光璞张 1 条回复 最后回复
                            0
                            • Henry Chiu 0H Henry Chiu 0

                              以平衡配置難易度+耗電+速度三者來看, mac studio是否好選擇? 而且它是一台很強的工作站(它很貴則是我的問題)

                              babyedi3B
                              babyedi3B
                              babyedi3
                              编写于 最后由 编辑
                              #23

                              @Henry-Chiu-0 几万块的东西一台飞度的钱了,我也研究很久。基本确定是最好的解决方案。512G版本估计要12w,而且要排队几个月,GPU CPU相同的情况下,跑量化Q6速度很慢,反而意义没那么大。现在甜点基本就是dsv4f 和 qwen3.8-next-flash-Q6

                              1 条回复 最后回复
                              0
                              • Henry Chiu 0H Henry Chiu 0

                                如果跑comfyui速度能跟上N卡, 真是神機了, 期望社区生态能開發出來

                                babyedi3B
                                babyedi3B
                                babyedi3
                                编写于 最后由 编辑
                                #24

                                @Henry-Chiu-0 这是物理限制不可能的了。毕竟80核GPU高配版也就5080水平,楼主的64核是4080水平的GPU。
                                ComfyUI尤其是生视频要求的是GPU算力,其实很好理解。比如生图是没问题的,视频其实就是1s 30帧就是30张图,5s就是150张图。
                                这算力卡着,如果苹果能做好,那GPU独显只会更好。

                                1 条回复 最后回复
                                0
                                • ,terryT terry 引用了 此主题
                                • babyedi3B babyedi3

                                  @张光璞 请问佬友,双XTX用的什么模型?效果很好啊。速度50t/s不算很快,是strata技术吗

                                  张光璞张
                                  张光璞张
                                  张光璞
                                  技术大牛 劳动模范
                                  编写于 最后由 编辑
                                  #25

                                  @babyedi3 说:

                                  @张光璞 请问佬友,双XTX用的什么模型?效果很好啊。速度50t/s不算很快,是strata技术吗

                                  就是最近大火的 Strata Qwen3.8 Flash Q3_s 速度在60t/s 左右 。 60t 要看跟谁比,比在线 200多的api 那肯定 是不行。但在后面慢慢的跑个长任务已经很好了。

                                  1 条回复 最后回复
                                  0
                                  • Jw ZhangJ Jw Zhang

                                    @kos-or 是需要对比一下质量。
                                    先上一个鹈鹕骑车
                                    Deepseek v4.1 flash
                                    Screenshot 2026-10-08 235105.png

                                    Qwen3.8 flash next
                                    Screenshot 2026-10-08 235543.png

                                    johnnybegoodJ
                                    johnnybegoodJ
                                    johnnybegood
                                    超凡大师
                                    编写于 最后由 编辑
                                    #26

                                    @Jw-Zhang 我的Qwen3.8 flash next 的鹈鹕明明是这样的啊:9094726b-478d-4eb4-947f-cd7c486d684f.html

                                    1 条回复 最后回复
                                    0

                                    你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                    厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                    有了你的建议,这篇帖子会更精彩哦 💗

                                    注册 登录
                                    回复
                                    • 在新帖中回复
                                    登录后回复
                                    • 从旧到新
                                    • 从新到旧
                                    • 最多赞同


                                    • 登录

                                    • 登录或注册以进行搜索。
                                    • 第一个帖子
                                      最后一个帖子
                                    0
                                    • 版块
                                    • 最新
                                    • 标签
                                    • 热门
                                    • 用户
                                    • 群组