<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0"><channel><title><![CDATA[本地模型到底行不行？！ DSH會是提升模型能力的解藥嗎？ 讓AI玩新遊戲第二篇！]]></title><description><![CDATA[<p dir="auto"><a href="https://lcz.me/post/25783">https://lcz.me/post/25783</a><br />
接續前一篇的突發奇想，筆者花了點時間測了模型在不同Harness架構下表現如何？</p>
<p dir="auto">這次多準備了兩個Harness架構 Codex、DeepSeek Harness（DSH）與 前一次的Hermes，搭配 Astra (low)、GPT‑6.1 Sol (low)、Qwen3.8 Flash Next。一樣是無記憶重新開始玩<strong>Inscryption</strong>，除了看最後走到哪裡，也記錄模型遇到阻礙後，如何操作、校正與恢復。 <strong>這次全程未介入</strong></p>
<p dir="auto">為什麼雲端模型選low? 第一是縮小雲端本地模型跑分的差異(請參考前一篇)，第二是我想省錢<img src="https://lcz.me/assets/plugins/nodebb-plugin-emoji/emoji/android/1f602.png?v=ec85ec55bc1" class="not-responsive emoji emoji-android emoji--joy" style="height:1.4em;width:auto;vertical-align:middle" title=":joy:" alt="😂" /></p>
<p dir="auto">一樣先給趕時間的人看結果吧<br />
<img src="https://upload.lcz.me/uploads/bdcca616-67b2-40b7-9fbd-3886235ab579.jpeg" alt="image.jpeg" class="img-markdown  img-fluid" /></p>
<p dir="auto">Codex／DSH 使用相同prompt且給完整權限：<br />
請通關這個遊戲，不可以上網找資料。</p>
<p dir="auto">這兩批的時間與停止條件不同，因此分開呈現，不合併成通關速度排行榜。</p>
<h5>一小時計時時間內，過程差異巨大</h5>
<p dir="auto"><img src="https://upload.lcz.me/uploads/8895bdae-0fc4-4302-a39c-a1727618352d.jpeg" alt="image.jpeg" class="img-markdown  img-fluid" /></p>
<p dir="auto">地圖標記代表時間到時正在進行的關卡。DSH＋Astra 則是剛突破關卡、進入劇情殺，尚未展開後續離開牌桌的解謎。</p>
<p dir="auto">不過，Astra 在 DSH 裡竟然邊玩邊修改自己的工具！！<br />
DSH的原生computer use工具缺少遊戲所需的滑鼠懸停功能(用來查看牌的資訊等等），Astra 便動手補上。</p>
<p dir="auto">修改時間包含在一小時內，還修修改改了些他覺得卡手的工具<br />
目前無法估算「如果沒有修工具，本來能走多遠」，如果不修改他是否能到BOSS關目前也沒辦法下定論。</p>
<h5>Qwen：嘗試校正computer use定位，卻功虧一簣</h5>
<table class="table table-bordered table-striped">
<thead>
<tr>
<th>模型</th>
<th>Codex</th>
<th>DSH</th>
</tr>
</thead>
<tbody>
<tr>
<td>Astra</td>
<td>未觀察到校正</td>
<td>有校正</td>
</tr>
<tr>
<td>GPT‑6.1 Sol</td>
<td>未觀察到校正</td>
<td>有校正</td>
</tr>
<tr>
<td>Qwen</td>
<td>跨場景經常校正</td>
<td>跨場景經常校正</td>
</tr>
</tbody>
</table>
<p dir="auto">校正後有改善，但並非每次成功。<br />
在 DSH＋Qwen 的祭壇附加能力場景中，Qwen 點擊石塊偏移，察覺未命中後進行校正；第二次仍點偏，<strong>卻判定按鈕沒有作用</strong><img src="https://lcz.me/assets/plugins/nodebb-plugin-emoji/emoji/android/1f644.png?v=ec85ec55bc1" class="not-responsive emoji emoji-android emoji--face_with_rolling_eyes" style="height:1.4em;width:auto;vertical-align:middle" title=":face_with_rolling_eyes:" alt="🙄" /> 。</p>
<p dir="auto">在 Codex＋Qwen 中，約第 40 分鐘戰敗後出現持續思考、不再操作的情況，直到一小時結束。畫面雖有 S 鍵提示，但Qwen陷入了害怕失敗的無限思考迴圈。下圖<br />
<img src="https://upload.lcz.me/uploads/3d37039a-f519-4a9f-931a-3f32df2dd6b6.jpeg" alt="image.jpeg" class="img-markdown  img-fluid" /></p>
<p dir="auto">在前一篇文章中Hermes＋Qwen 中，則停在更早的第二個教學關，尚未進入這張地圖。</p>
<p dir="auto">配置與解讀範圍</p>
<table class="table table-bordered table-striped">
<thead>
<tr>
<th>模型</th>
<th>推理設定</th>
<th>Codex 接入</th>
<th>DSH 接入</th>
</tr>
</thead>
<tbody>
<tr>
<td>Astra</td>
<td>Low</td>
<td>原生</td>
<td>Provider</td>
</tr>
<tr>
<td>GPT‑6.1 Sol</td>
<td>Low</td>
<td>原生</td>
<td>Provider</td>
</tr>
<tr>
<td>Qwen3.8 Flash Next</td>
<td>Med</td>
<td>Codex CLI</td>
<td>本地 API</td>
</tr>
</tbody>
</table>
<p dir="auto">Codex／DSH 均使用最高免詢問權限，全程無人工提醒或介入。Qwen 本地服務為 mlx-serve 26.10.2，Context 262,144，MTP 開啟、depth cap 6。</p>
<p dir="auto">這次最值得比較的，不只是終點，而是模型遇到阻礙後做了什麼。 Astra 修改工具、Qwen 嘗試校正卻仍可能停滯，都是終點地圖無法單獨呈現的部分。</p>
<p dir="auto">資料限制集中說明</p>
<ul>
<li>Codex／DSH 每組僅測一次，路線由模型自行選擇。</li>
<li>Hermes 時間與停止條件不同，不與固定一小時結果合併排名。</li>
<li>接入方式與推理設定不同，目前不將結果解讀為純模型能力排名。</li>
</ul>
<h4>那結果是什麼？！</h4>
<p dir="auto">以這三個Codex, Hermes, DSH來說，Codex的原生Computer use的能力看起來是比其他兩個還要好的。</p>
<p dir="auto">且Codex加上原生模型推進關卡的速度快過Hermes/DSH使用這兩個GPT模型</p>
<p dir="auto">Qwen看來真的對於未知且困難任務能力不足，即使換了Harness也解決不了他本身的問題，號稱未來霸主的DSH也救不了他</p>
<p dir="auto">各位覺得如何呢？希望可以多多交流看到有大佬使用別的模型來跑看看這類型的測試</p>
]]></description><link>https://lcz.me/topic/2434</link><generator>RSS for Node</generator><lastBuildDate>Sun, 25 Oct 2026 02:00:08 GMT</lastBuildDate><atom:link href="https://lcz.me/topic/2434.rss" rel="self" type="application/rss+xml"/><pubDate>Mon, 19 Oct 2026 15:59:35 GMT</pubDate><ttl>60</ttl><item><title><![CDATA[Reply to 本地模型到底行不行？！ DSH會是提升模型能力的解藥嗎？ 讓AI玩新遊戲第二篇！ on Wed, 21 Oct 2026 15:10:45 GMT]]></title><description><![CDATA[<p dir="auto"><a class="plugin-mentions-user plugin-mentions-a" href="/user/kos-or" aria-label="Profile: kos-or">@<bdi>kos-or</bdi></a></p>
<p dir="auto">让我想起看门狗这个游戏</p>
]]></description><link>https://lcz.me/post/26552</link><guid isPermaLink="true">https://lcz.me/post/26552</guid><dc:creator><![CDATA[imbiplaza ASUS]]></dc:creator><pubDate>Wed, 21 Oct 2026 15:10:45 GMT</pubDate></item><item><title><![CDATA[Reply to 本地模型到底行不行？！ DSH會是提升模型能力的解藥嗎？ 讓AI玩新遊戲第二篇！ on Wed, 21 Oct 2026 13:51:31 GMT]]></title><description><![CDATA[<blockquote>
<p dir="auto"><a class="plugin-mentions-user plugin-mentions-a" href="/user/fanweng-code" aria-label="Profile: fanweng-code">@<bdi>fanweng-code</bdi></a> <a href="/post/26015">said</a>:</p>
<p dir="auto">以這三個Codex, Hermes, DSH來說，Codex的原生Computer use的能力看起來是比其他兩個還要好的。</p>
</blockquote>
<p dir="auto">我的推測 GPT Codex 的發展路線是往未來 "handfree" Operating System 方向發展, 所以設計上會比較全面<br />
就像用語音和 Astra溝通就好 人類不需要鍵盤了</p>
]]></description><link>https://lcz.me/post/26535</link><guid isPermaLink="true">https://lcz.me/post/26535</guid><dc:creator><![CDATA[kos or]]></dc:creator><pubDate>Wed, 21 Oct 2026 13:51:31 GMT</pubDate></item><item><title><![CDATA[Reply to 本地模型到底行不行？！ DSH會是提升模型能力的解藥嗎？ 讓AI玩新遊戲第二篇！ on Mon, 19 Oct 2026 16:33:28 GMT]]></title><description><![CDATA[<p dir="auto">等我得空我做那个qwen网络百家乐看看</p>
]]></description><link>https://lcz.me/post/26022</link><guid isPermaLink="true">https://lcz.me/post/26022</guid><dc:creator><![CDATA[imbiplaza ASUS]]></dc:creator><pubDate>Mon, 19 Oct 2026 16:33:28 GMT</pubDate></item></channel></rss>