<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0"><channel><title><![CDATA[洋垃圾讓你一隻手 V100 16G 單卡測試Strata]]></title><description><![CDATA[<p dir="auto"><a href="https://lcz.me/post/26786">X99+V100 16G雙卡整台洋垃圾測速結果</a><br />
雙卡測完發現到性價比太無敵了，5000元你要甚麼自行車<br />
過去大多人瞧不起V100 16G了，老子今天讓你一隻手，看看單卡能玩到怎樣地步，這個是被拋棄的Volta架構<br />
現在做個實驗bypass掉一張，模擬單卡的性能如下，俺這可是DDR3雙通道而已，CPU也沒有AVX-512還低時脈<br />
模型 Qwen3.8-Flash-Next IQ3_S</p>
<h2>單卡模擬結果（只插 CUDA0，V100-SXM2-16GB，PCIe 3.0 x16）</h2>
<p dir="auto">配置：<code>gpu: [0]</code>，去掉 trim/pipeline（單卡無意義），保留 <code>--prefill auto:16384</code>（引擎自動降到 12288 chunk），expert cache 自動縮到 <strong>3468 slots</strong>（雙卡是 5614）。</p>
<h3>Prefill 階梯（冷預填）</h3>
<table class="table table-bordered table-striped">
<thead>
<tr>
<th style="text-align:right">階段</th>
<th style="text-align:right">單卡</th>
<th style="text-align:right">雙卡（調優後）</th>
<th style="text-align:right">雙卡/單卡</th>
</tr>
</thead>
<tbody>
<tr>
<td style="text-align:right">10k</td>
<td style="text-align:right"><strong>1564</strong></td>
<td style="text-align:right">1181</td>
<td style="text-align:right">0.75×</td>
</tr>
<tr>
<td style="text-align:right">20k</td>
<td style="text-align:right"><strong>1520</strong></td>
<td style="text-align:right">1251</td>
<td style="text-align:right">0.82×</td>
</tr>
<tr>
<td style="text-align:right">50k</td>
<td style="text-align:right">1398</td>
<td style="text-align:right"><strong>1876</strong></td>
<td style="text-align:right">1.34×</td>
</tr>
<tr>
<td style="text-align:right">100k</td>
<td style="text-align:right">1214</td>
<td style="text-align:right"><strong>1884</strong></td>
<td style="text-align:right">1.55×</td>
</tr>
<tr>
<td style="text-align:right">150k</td>
<td style="text-align:right">1092</td>
<td style="text-align:right"><strong>1792</strong></td>
<td style="text-align:right">1.64×</td>
</tr>
<tr>
<td style="text-align:right">200k</td>
<td style="text-align:right">999</td>
<td style="text-align:right"><strong>1666</strong></td>
<td style="text-align:right">1.67×</td>
</tr>
</tbody>
</table>
<p dir="auto">觀測起來比3060 12G還快一點<br />
只是Volta與Turing沒有Ampere的cp.async指令，不然以相同算力還可以榨出近兩倍的性能</p>
<h3>Decode（thinking off，median）</h3>
<table class="table table-bordered table-striped">
<thead>
<tr>
<th>prompt</th>
<th style="text-align:right">單卡</th>
<th style="text-align:right">雙卡</th>
<th style="text-align:right">雙卡/單卡</th>
</tr>
</thead>
<tbody>
<tr>
<td>essay</td>
<td style="text-align:right">48.4</td>
<td style="text-align:right">73.5</td>
<td style="text-align:right">1.52×</td>
</tr>
<tr>
<td>code</td>
<td style="text-align:right">41.3</td>
<td style="text-align:right">77.9</td>
<td style="text-align:right">1.89×</td>
</tr>
<tr>
<td>translate</td>
<td style="text-align:right">44.2</td>
<td style="text-align:right">79.6</td>
<td style="text-align:right">1.80×</td>
</tr>
<tr>
<td>explain</td>
<td style="text-align:right">44.0</td>
<td style="text-align:right">78.1</td>
<td style="text-align:right">1.77×</td>
</tr>
</tbody>
</table>
<h3>解讀</h3>
<ul>
<li><strong>短 prompt（≤20k）單卡反而快</strong>：沒有跨卡 hand-off 開銷，且 16GB 的 expert cache 對短上下文夠用。</li>
<li><strong>長上下文（≥50k）雙卡全面勝出</strong>：單卡 expert cache 小一半（3468 vs 5614 slots），長 prompt 的專家 miss 要走 PCIe（12GB/s）補，速度從 1398 一路掉到 999；雙卡有 5614 slots + 兩張卡的 VRAM 分擔 KV，200k 仍維持 1666。</li>
<li><strong>Decode 雙卡穩定 1.5–1.9×</strong>：專家計算分攤到兩卡 + 更大的 expert cache hit rate。</li>
</ul>
<p dir="auto">結論：這台雙卡配置在長上下文場景（你實際用的 50k–200k）比單卡快 34–67%，decode 快近一倍——第二張卡很值。</p>
<p dir="auto">其實單卡性能也不差 已經是能夠舒服使用的水平，<br />
但考量到這卡實在太便宜 預算夠不怕吵就雙卡吧</p>
]]></description><link>https://lcz.me/topic/2510</link><generator>RSS for Node</generator><lastBuildDate>Sun, 25 Oct 2026 18:24:04 GMT</lastBuildDate><atom:link href="https://lcz.me/topic/2510.rss" rel="self" type="application/rss+xml"/><pubDate>Thu, 22 Oct 2026 16:34:05 GMT</pubDate><ttl>60</ttl><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Sun, 25 Oct 2026 13:47:27 GMT]]></title><description><![CDATA[<p dir="auto"><a class="plugin-mentions-user plugin-mentions-a" href="/user/amdyes" aria-label="Profile: amdyes">@<bdi>amdyes</bdi></a> 你哪里买的 我买的pcie原版要1400了 拼多多</p>
]]></description><link>https://lcz.me/post/27719</link><guid isPermaLink="true">https://lcz.me/post/27719</guid><dc:creator><![CDATA[gao Gao]]></dc:creator><pubDate>Sun, 25 Oct 2026 13:47:27 GMT</pubDate></item><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Sun, 25 Oct 2026 13:46:47 GMT]]></title><description><![CDATA[<p dir="auto">我的第一块v100到手了,感觉这个东西还是要运气,满载啸叫很厉害,说明以前已经被榨干了.....我把频率降到950好很多,不知道第二块如何</p>
]]></description><link>https://lcz.me/post/27717</link><guid isPermaLink="true">https://lcz.me/post/27717</guid><dc:creator><![CDATA[gao Gao]]></dc:creator><pubDate>Sun, 25 Oct 2026 13:46:47 GMT</pubDate></item><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Sun, 25 Oct 2026 10:09:41 GMT]]></title><description><![CDATA[<p dir="auto">前两天刚买了，1200，原版pcie的。就是怕哪天突然暴涨。</p>
]]></description><link>https://lcz.me/post/27663</link><guid isPermaLink="true">https://lcz.me/post/27663</guid><dc:creator><![CDATA[amdyes]]></dc:creator><pubDate>Sun, 25 Oct 2026 10:09:41 GMT</pubDate></item><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Sat, 24 Oct 2026 07:50:51 GMT]]></title><description><![CDATA[<p dir="auto">有個壞消息是淘寶上的V100似乎開始漲價了，連這種老東西都能炒...</p>
]]></description><link>https://lcz.me/post/27319</link><guid isPermaLink="true">https://lcz.me/post/27319</guid><dc:creator><![CDATA[Tzung-Ru Tsai]]></dc:creator><pubDate>Sat, 24 Oct 2026 07:50:51 GMT</pubDate></item><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Fri, 23 Oct 2026 19:25:53 GMT]]></title><description><![CDATA[<p dir="auto"><a class="plugin-mentions-user plugin-mentions-a" href="/user/cool-cai" aria-label="Profile: cool-cai">@<bdi>cool-cai</bdi></a> 可以呀 我這測試環境有做vision的mmproj<br />
<img src="https://upload.lcz.me/uploads/ee9e0dad-c6e8-4809-9560-c7d786692b9a.jpeg" alt="image.jpeg" class="img-markdown  img-fluid" /></p>
]]></description><link>https://lcz.me/post/27162</link><guid isPermaLink="true">https://lcz.me/post/27162</guid><dc:creator><![CDATA[dardeaw feng]]></dc:creator><pubDate>Fri, 23 Oct 2026 19:25:53 GMT</pubDate></item><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Fri, 23 Oct 2026 18:15:37 GMT]]></title><description><![CDATA[<p dir="auto"><a class="plugin-mentions-user plugin-mentions-a" href="/user/cool-cai" aria-label="Profile: cool-cai">@<bdi>cool-cai</bdi></a> 也就差不多了，需要这些洋垃圾配置省钱的，都能凑合。</p>
]]></description><link>https://lcz.me/post/27158</link><guid isPermaLink="true">https://lcz.me/post/27158</guid><dc:creator><![CDATA[terry]]></dc:creator><pubDate>Fri, 23 Oct 2026 18:15:37 GMT</pubDate></item><item><title><![CDATA[Reply to 洋垃圾讓你一隻手 V100 16G 單卡測試Strata on Fri, 23 Oct 2026 17:32:18 GMT]]></title><description><![CDATA[<p dir="auto">单卡16g和双卡16*2=32g 有一个痛点 不能加载识图。只能纯文本推理。</p>
]]></description><link>https://lcz.me/post/27147</link><guid isPermaLink="true">https://lcz.me/post/27147</guid><dc:creator><![CDATA[cool cai]]></dc:creator><pubDate>Fri, 23 Oct 2026 17:32:18 GMT</pubDate></item></channel></rss>