跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签
硬件
装备秀
AI 广场
张光璞张

张光璞

@张光璞
技术大牛 劳动模范
取消关注 关注
关于
帖子
321
主题
7
分享
0
群组
2
粉丝
2
关注
0

帖子

最新 最佳 有争议的

  • 雙R9700玩qfn的朋友又有得玩了
    张光璞张 张光璞
    LLM讨论区 r9700 qwen-flash 多卡部署

    @johnnybegood 说:

    看这一轮轮军备竞赛, 我只想说一句话:

    吾生也有涯,而知也无涯。以有涯随无涯,殆已!

    没有人会嫌输出快。看到新框架总是想试试的。 当软件成为瓶颈的时候只能折腾硬件了


  • 雙R9700玩qfn的朋友又有得玩了
    张光璞张 张光璞
    LLM讨论区 r9700 qwen-flash 多卡部署

    @fcme 说:

    @paul-hou
    被这帖子搞的都有点心痒痒想入第二块9700😏

    昨天看到此贴时去京东看了下价,盈通的9700 都 14000了


  • 雙R9700玩qfn的朋友又有得玩了
    张光璞张 张光璞
    LLM讨论区 r9700 qwen-flash 多卡部署

    @paul-hou 说:

    @张光璞
    STRATA又更新了,單R9700的PREFILL上升19%

    Prompt MMQ(PF_FUSED_NATIVE=0) Fused int8 kernel 提升
    7,118 tok 3,953 ms(1,801 tok/s) 3,309 ms(2,160 tok/s) +19.5%
    14,244 tok 7,567 ms(1,882 tok/s) 6,318 ms(2,256 tok/s) +19.8%

    我的9700 供电没解决,12V会被用电尖峰拉跳闸。 降频降压解决不了。

    只能改电源了。


  • [实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks
    张光璞张 张光璞
    LLM讨论区 apple-m5 qwen-flash deepseek

    @Jw-Zhang 说:

    852.jpeg

    851.jpeg

    无头服务器,就这样了

    昨天逛街去苹果店看了一下mac studio ,还是很帅的。比想象的大,可能见mini 见多了


  • 雙R9700玩qfn的朋友又有得玩了
    张光璞张 张光璞
    LLM讨论区 r9700 qwen-flash 多卡部署

    Strata 这两天没密集更新 ,刚说可以歇一阵,这又来这么一出。


  • 雙R9700玩qfn的朋友又有得玩了
    张光璞张 张光璞
    LLM讨论区 r9700 qwen-flash 多卡部署

    @kos-or 说:

    @fcme

    哈哈 這建議讓我思考了一下

    AMD R9700 也可以跑ComfyUI嗎? 我也需要佈置一個ComfyUI 工作流
    還是 LLM (R9700) + ComfyUI (5070 Ti) 的佈置?

    可以,我今天刚用r9700 跑了视频 ,双9700 还没试


  • 【实测】 Qwen3.8-Flash-Next GSQ-RCO IQ3_S,3D鹈鹕骑行动画制作经验分享。
    张光璞张 张光璞
    LLM讨论区 qwen-flash qwen-27b 视频生成

    我是双7900XTX 跑了35分钟

    替代文字

    替代文字


  • Qwen Flash Next for AMD R9700
    张光璞张 张光璞
    LLM讨论区 r9700 qwen-flash strata

    @exe127 说:

    @kos-or strata 用的125B輸出的結果真的會比 27B更強嗎?

    Q3_S 现在日常办公感觉比以前的MXFP4 要强,毕竟模型体量在这里。


  • 不管你信不信, 单卡 3090 跑 Qwen3.8 Flash Next 可以到 100tok/s 了!
    张光璞张 张光璞
    LLM讨论区 rtx3090 strata qwen-flash

    @johnnybegood 说:

    @tszhoill 玩着玩着就发现消费级CPU和主板根本不够用, 一定要上工作站级别的。

    终究还是进入了军备竞赛的怪圈。


  • 双 7900 XTX 跑 Strata 的生产基线、坑全记录,外加和 Strix Halo halogen 的同 prompt 对决
    张光璞张 张光璞
    AI硬件 7900xtx strata 多卡部署

    双7900XTX 跟我现在跑出来的数据一致。 已经处于可用的状态了。


  • 今天看京东的4090 48g 显卡已经调到了七万多,涨了三万多了
    张光璞张 张光璞
    AI硬件 rtx4090

    这种就是乱写价,能骗一个是一个。 这个价不如4卡9700了


  • [实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks
    张光璞张 张光璞
    LLM讨论区 apple-m5 qwen-flash deepseek

    @stxpnet 说:

    画一个3D的 鹈鹕在海边公路骑自行车动画,用HTML5及必要的技术来展示,要求细节拉满,有美感,比例正确60帧不卡顿,默认从左后方向45度视角,有日夜切换按钮,太阳和月亮会随时间变化 运动(大概是20倍于现实中的时间流逝),鹈鹕左侧的路面增加一些花花草草,海里增加一些小鱼时不时的跃出水面,沙滩上有螃蟹及海螺,岸边有人散步,海里有些人游泳,远处有一些渔船,海上有一些海鸥随机飞翔。 夜晚天上加一些星星,保存为pelican.html(本机默认下载好three.js,如果没有也可以自动从中国CDN快速加载)。游戏要有server.py,启动后随机寻找一个本机的空闲端口作为服务器,并自动从默认浏览器打开让用户试玩.
    

    可以试试3D鹈鹕提示词,看多久可以完成,效果如何。

    双7900XTX 35分钟

    image.jpeg

    image.jpeg


  • [实测]m5 ultra 256G ds v4.1 flash oq3.5 97toks | qwen3.8 flash next oq6 143toks
    张光璞张 张光璞
    LLM讨论区 apple-m5 qwen-flash deepseek

    昨天刚说完,Mac 的优化也是好起来了,今天就能看到成绩。

    看来512G 还是很有价值


  • 工作室規劃:4 台 DGX Spark 本地 AI 叢集架構,並預留擴充至 8 台
    张光璞张 张光璞
    AI硬件 dgxspark 多卡部署

    这样摆放是不是散热不够好。我看到一个方案是4机直接垂直放在小米空气净化器上的。


  • 【直播】二次开发R9700单卡用SGLang跑Qwen3.8-27B成功! TTFT0.9s/PP2000/TG100tps(代码)!体验丝滑
    张光璞张 张光璞
    LLM讨论区 r9700 sg-lang qwen-27b

    @fcme 说:

    @张光璞
    哦,那使用体验也相当不错了,只不过相比价格,性价比不高。如果看中体积的话,那就没办法了,只有迈克。
    我的5070ti现在跑起来应该是在一千四五的pp速度,然后生成是在55~60的样子。

    MAC 的并发估计也好不到哪去,适合一个人慢慢干长活。

    小团队还是多显卡,或DGX 集群


  • llama.cpp 0.6.0 出了,继续跑我的 Deepseek V4 和 GLM5.3 Flash !
    张光璞张 张光璞
    LLM讨论区 llama.cpp deepseek glm

    @stxpnet 说:

    推上有人拿strata 说事,埋怨llama.cpp,vllm,sglang的人都在干嘛.

    Strata 现在一天两更,太疯狂了。 我整了个计划任务自动抓取跟AMD 相关的性能优化,其他都略过。


  • NVIDIA RTX PRO 5000 72GB 正确抄作业,效果很好。介绍复刻要点。
    张光璞张 张光璞
    LLM讨论区 rtxpro5000 qwen-27b sg-lang

    这么好的卡只跑27B 吗? 整整Strata Qwen3.8 Flash Next 让我们开开眼!


  • 【直播】二次开发R9700单卡用SGLang跑Qwen3.8-27B成功! TTFT0.9s/PP2000/TG100tps(代码)!体验丝滑
    张光璞张 张光璞
    LLM讨论区 r9700 sg-lang qwen-27b

    @fcme 说:

    @张光璞
    是啊,这是趋势,AI利好小众硬件。
    现在Mac能到啥速度了?求赐教

    B站有个哥们跑Qwen flash 能到80T/s

    https://www.bilibili.com/video/BV1ZjHi6XEc4/?spm_id_from=333.1387.homepage.video_card.click&vd_source=c7fdfb9d4943df340439e35e09bbaa4e

    image.jpeg


  • 2 *7900 XTX vllm TP2, 8并发 476 tok/s,256K *4 ,157tok/s
    张光璞张 张光璞
    LLM讨论区 7900xtx vllm 多卡部署

    @Ben-Lee 说:

    @farmer-node vLLM这么牛啊,之前了解不够,这个并发都可以给小办公室用了吧

    但是他TTFT 很慢


  • M5 Ultra 确实有点弱啊! 对比双卡 DGX Spark 集群:你在跑大模型时一直忽视的“致命数字”到底是什么?
    张光璞张 张光璞
    LLM讨论区 apple-m5 dgxspark 多卡部署

    Spark 虽然显存带宽不行,但网络和计算很强
    现在看来MAC 更适合个人单任务慢慢跑
    Spark 组集群 更适合小团队来用。

  • 登录

  • 登录或注册以进行搜索。
  • 第一个帖子
    最后一个帖子
0
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组