Your browser does not seem to support JavaScript. As a result, your viewing experience will be diminished, and you have been placed in read-only mode.
Please download a browser that supports JavaScript, or enable it if it's disabled (i.e. NoScript).
最好发一下上下文过半之后的速度,反正 我的经验,上下文过半之后,速度也掉到一半,比较难受。
@im17me 说: Z390
@im17me 说:
Z390
大佬 你这个是有桥接器的速度吗,我也想上双3090 用啥板子支持呀,要不要搞延长线 pci5 8x+8x的可以吗
@HighNie 3090显卡只有PCIE4.0
@stxpnet 说: 最好发一下上下文过半之后的速度,反正 我的经验,上下文过半之后,速度也掉到一半,比较难受。
@stxpnet 说:
用sglang速度还好,4bit模型不带MTP初始速度50+,超过128k以后也有40+。而且并发速度也不错。
没接nvlink吗?我记得3080能接
@ezios 不能的,3090才能
@neo 哦对,但是3090似乎没有魔改显存版本?
最新的QWEN3.8跑一下,感觉很妙啊这个版本
@ezios 嗯,没见过3090魔改显存的呢
@neo 看了眼又涨价了,之前6k能拿下,现在涨到9k了
@ezios 9k,不如上4080s 32G了
你好!看起来您对这段对话很感兴趣,但您还没有一个账号。
厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。
有了你的建议,这篇帖子会更精彩哦 💗