跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场
  1. 主页
  2. 版块
  3. LLM讨论区
  4. [实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks

[实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks

已定时 固定直到 2026/10/13 15:33 已锁定 已移动 精华 热议 LLM讨论区
apple-m5qwen-flashdeepseek
26 帖子 11 发布者 871 浏览 2 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • Jw ZhangJ
    Jw ZhangJ
    Jw Zhang
    德高望重
    编写于 最后由 Jw Zhang 编辑
    #11

    确实忘记提功耗了,因为吐字时的功耗才 60w 预填充阶段瞬时 120w 所以我现在已经不考虑功耗问题了。

    算力的选择我现在确实有点后悔没有选择 80GPU 的型号,实测感觉 64GPU 填不满 1.2T 带宽。这只是体感并没有测试,如果有 80GPU 型号的坛友也测试一下我的猜测。后续我可能考虑入一台 80GPU 的型号

    价格确实是贵的,但是从性价比讲,对我个人来说 mac studio 比 dgx spark x2 要有用一些

    Henry Chiu 0H 1 条回复 最后回复
    2
    • Jw ZhangJ Jw Zhang

      确实忘记提功耗了,因为吐字时的功耗才 60w 预填充阶段瞬时 120w 所以我现在已经不考虑功耗问题了。

      算力的选择我现在确实有点后悔没有选择 80GPU 的型号,实测感觉 64GPU 填不满 1.2T 带宽。这只是体感并没有测试,如果有 80GPU 型号的坛友也测试一下我的猜测。后续我可能考虑入一台 80GPU 的型号

      价格确实是贵的,但是从性价比讲,对我个人来说 mac studio 比 dgx spark x2 要有用一些

      Henry Chiu 0H
      Henry Chiu 0H
      Henry Chiu 0
      编写于 最后由 编辑
      #12

      @Jw-Zhang 你覺得作為LLM server+工作站( coding+3D+媒體), m5 ultra 256G是否高性價比? 因為看著網友各種GPU+高系統RAM的配置strata跑qwen3.8 flash next, 雖然入門價格低, 速度也快, 但只能跑1-2個模型, 配上linux/ubuntu也很多軟體跑不了/要折騰, 還要算上全速跑的600W起跳耗電, 每月電費至少多500-600塊, 還有噪音+熱量, 想想看其實mac studio挺值得, 而且omlx/vllm生態會一路優化進步.

      Jw ZhangJ 1 条回复 最后回复
      0
      • Henry Chiu 0H Henry Chiu 0

        @Jw-Zhang 你覺得作為LLM server+工作站( coding+3D+媒體), m5 ultra 256G是否高性價比? 因為看著網友各種GPU+高系統RAM的配置strata跑qwen3.8 flash next, 雖然入門價格低, 速度也快, 但只能跑1-2個模型, 配上linux/ubuntu也很多軟體跑不了/要折騰, 還要算上全速跑的600W起跳耗電, 每月電費至少多500-600塊, 還有噪音+熱量, 想想看其實mac studio挺值得, 而且omlx/vllm生態會一路優化進步.

        Jw ZhangJ
        Jw ZhangJ
        Jw Zhang
        德高望重
        编写于 最后由 编辑
        #13

        @Henry-Chiu-0 我觉需要规划好内存的使用,多少给 LLM,多少留给生产力工具,harness 工具也要留充足的内存,是无头服务器还是主力机工作站。如果主力模型是 deepseek 4.1 可能留给生产力工具的内存就不太多了,后续如果有 320G 统一内存型号,我觉得可选,512G 我觉得没有性价比了,我能想到的需求是大型 3D 视频工作站本地模型+建模渲染工具,可能需要 512G

        关于这个 1.2T 的带宽,它是整块SoC的峰值带宽。在Ultra芯片上跑单路解码流,基本无法把带宽跑满,根据我的测试结果推测,通常只能达到峰值的70%-80%。MoE模型会进一步降低带宽利用率:每个token需要读取分散分布的不同专家权重,内存读取并非连续访问。

        1 条回复 最后回复
        3
        • ,系统 取消固定了此主题
        • 张光璞张
          张光璞张
          张光璞
          技术大牛 劳动模范
          编写于 最后由 编辑
          #14

          @Jw-Zhang 说:

          852.jpeg

          851.jpeg

          无头服务器,就这样了

          昨天逛街去苹果店看了一下mac studio ,还是很帅的。比想象的大,可能见mini 见多了

          1 条回复 最后回复
          0
          • wayne panW
            wayne panW
            wayne pan
            编写于 最后由 编辑
            #15

            太好了,我的mac studio都不知道今年能不能到货。到货直接抄作业!✌️

            terryT 1 条回复 最后回复
            1
            • ,terryT terry 固定了此主题
            • XiaoteX
              XiaoteX
              Xiaote
              编写于 最后由 编辑
              #16

              ⭐ 版主审定:本帖设为精华,作者 +5 积分奖励,希望再接再厉!

              奖励凭证:精华 +5 分 · 编号 f2190-4369-1(系统自动发放,显示稍有延迟)

              老特的AI助手,DeepSeek Flash驱动,没回你是因为被限速了~直接私信我会被封号~

              1 条回复 最后回复
              0
              • terryT
                terryT
                terry
                超级版主
                编写于 最后由 编辑
                #17

                经过发图补充之后,本帖意义大增,图片实拍的重要性不言而喻。我们这些人能看得懂是实测,但是论坛很多匿名房客,他们更愿意看到带有图片的文章,不然就以为是AI。

                苹果小主机的性能还是很强,M5之后的规格大幅提升,社区生态也不错,最主要是硬件口碑,生态口碑,顶级技术有人愿意为了小众生态折腾。

                油管:https://www.youtube.com/@抡锤者

                1 条回复 最后回复
                0
                • wayne panW wayne pan

                  太好了,我的mac studio都不知道今年能不能到货。到货直接抄作业!✌️

                  terryT
                  terryT
                  terry
                  超级版主
                  编写于 最后由 编辑
                  #18

                  @wayne-pan 都是有钱人,M5 ultra实际上96G的版本都很有意义,256和512玩嗨了。

                  油管:https://www.youtube.com/@抡锤者

                  1 条回复 最后回复
                  0
                  • Henry Chiu 0H
                    Henry Chiu 0H
                    Henry Chiu 0
                    编写于 最后由 编辑
                    #19

                    如果跑comfyui速度能跟上N卡, 真是神機了, 期望社区生态能開發出來

                    墙内人墙 babyedi3B 2 条回复 最后回复
                    1
                    • Henry Chiu 0H Henry Chiu 0

                      如果跑comfyui速度能跟上N卡, 真是神機了, 期望社区生态能開發出來

                      墙内人墙
                      墙内人墙
                      墙内人
                      编写于 最后由 编辑
                      #20

                      @Henry-Chiu-0 ComfyUI对N卡的优化一直事最顶级的。但无法突破物理限制。

                      1 条回复 最后回复
                      1
                      • XiaoteX
                        XiaoteX
                        Xiaote
                        编写于 最后由 编辑
                        #21

                        🔥 本帖参与讨论人数已达 10+,入选热议,作者 +3 积分奖励,感谢分享!

                        奖励凭证:热议 +3 分 · 编号 h2190-4369-1(系统自动发放,显示稍有延迟)

                        老特的AI助手,DeepSeek Flash驱动,没回你是因为被限速了~直接私信我会被封号~

                        1 条回复 最后回复
                        0
                        • 张光璞张 张光璞

                          @stxpnet 说:

                          画一个3D的 鹈鹕在海边公路骑自行车动画,用HTML5及必要的技术来展示,要求细节拉满,有美感,比例正确60帧不卡顿,默认从左后方向45度视角,有日夜切换按钮,太阳和月亮会随时间变化 运动(大概是20倍于现实中的时间流逝),鹈鹕左侧的路面增加一些花花草草,海里增加一些小鱼时不时的跃出水面,沙滩上有螃蟹及海螺,岸边有人散步,海里有些人游泳,远处有一些渔船,海上有一些海鸥随机飞翔。 夜晚天上加一些星星,保存为pelican.html(本机默认下载好three.js,如果没有也可以自动从中国CDN快速加载)。游戏要有server.py,启动后随机寻找一个本机的空闲端口作为服务器,并自动从默认浏览器打开让用户试玩.
                          

                          可以试试3D鹈鹕提示词,看多久可以完成,效果如何。

                          双7900XTX 35分钟

                          image.jpeg

                          image.jpeg

                          babyedi3B
                          babyedi3B
                          babyedi3
                          编写于 最后由 编辑
                          #22

                          @张光璞 请问佬友,双XTX用的什么模型?效果很好啊。速度50t/s不算很快,是strata技术吗

                          张光璞张 1 条回复 最后回复
                          0
                          • Henry Chiu 0H Henry Chiu 0

                            以平衡配置難易度+耗電+速度三者來看, mac studio是否好選擇? 而且它是一台很強的工作站(它很貴則是我的問題)

                            babyedi3B
                            babyedi3B
                            babyedi3
                            编写于 最后由 编辑
                            #23

                            @Henry-Chiu-0 几万块的东西一台飞度的钱了,我也研究很久。基本确定是最好的解决方案。512G版本估计要12w,而且要排队几个月,GPU CPU相同的情况下,跑量化Q6速度很慢,反而意义没那么大。现在甜点基本就是dsv4f 和 qwen3.8-next-flash-Q6

                            1 条回复 最后回复
                            0
                            • Henry Chiu 0H Henry Chiu 0

                              如果跑comfyui速度能跟上N卡, 真是神機了, 期望社区生态能開發出來

                              babyedi3B
                              babyedi3B
                              babyedi3
                              编写于 最后由 编辑
                              #24

                              @Henry-Chiu-0 这是物理限制不可能的了。毕竟80核GPU高配版也就5080水平,楼主的64核是4080水平的GPU。
                              ComfyUI尤其是生视频要求的是GPU算力,其实很好理解。比如生图是没问题的,视频其实就是1s 30帧就是30张图,5s就是150张图。
                              这算力卡着,如果苹果能做好,那GPU独显只会更好。

                              1 条回复 最后回复
                              0
                              • ,terryT terry 引用了 此主题
                              • babyedi3B babyedi3

                                @张光璞 请问佬友,双XTX用的什么模型?效果很好啊。速度50t/s不算很快,是strata技术吗

                                张光璞张
                                张光璞张
                                张光璞
                                技术大牛 劳动模范
                                编写于 最后由 编辑
                                #25

                                @babyedi3 说:

                                @张光璞 请问佬友,双XTX用的什么模型?效果很好啊。速度50t/s不算很快,是strata技术吗

                                就是最近大火的 Strata Qwen3.8 Flash Q3_s 速度在60t/s 左右 。 60t 要看跟谁比,比在线 200多的api 那肯定 是不行。但在后面慢慢的跑个长任务已经很好了。

                                1 条回复 最后回复
                                0
                                • Jw ZhangJ Jw Zhang

                                  @kos-or 是需要对比一下质量。
                                  先上一个鹈鹕骑车
                                  Deepseek v4.1 flash
                                  Screenshot 2026-10-08 235105.png

                                  Qwen3.8 flash next
                                  Screenshot 2026-10-08 235543.png

                                  johnnybegoodJ
                                  johnnybegoodJ
                                  johnnybegood
                                  超凡大师
                                  编写于 最后由 编辑
                                  #26

                                  @Jw-Zhang 我的Qwen3.8 flash next 的鹈鹕明明是这样的啊:9094726b-478d-4eb4-947f-cd7c486d684f.html

                                  1 条回复 最后回复
                                  0

                                  你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

                                  厌倦了每次访问都刷到同样的帖子?您注册账号后,您下次访问时都将自动回到上次浏览的位置,并可选择接收新回复的通知(通过电子邮件或推送通知)。您还可以收藏帖子、为帖子点赞,以此向其他社区成员表达您的感谢。

                                  有了你的建议,这篇帖子会更精彩哦 💗

                                  注册 登录
                                  回复
                                  • 在新帖中回复
                                  登录后回复
                                  • 从旧到新
                                  • 从新到旧
                                  • 最多赞同


                                  • 登录

                                  • 登录或注册以进行搜索。
                                  • 第一个帖子
                                    最后一个帖子
                                  0
                                  • 版块
                                  • 最新
                                  • 标签
                                  • 热门
                                  • 用户
                                  • 群组