行動Hermes Agent USB
-
往长久看, AI-Agent 很可能是将来的OS UI.
對 這就是目前發展的趨勢 跟未來的人機互動的UI介面,
人類再也不需要動手打字 不需要使用word, excel, 操作Apps,
人類將會正式進入 只出一張嘴的 人人都是管理者時代打遊戲?我派出最強的AI Agent上場應戰
這邊衍生出另一個話題 :
綁住了UI , 就綁住了使用者的token 消費窗口
AIDC 數據中心 開始狂挖token販售數字石油給使用石油期貨, 算力期貨
这套东西的关键不是「USB」,而是「可引导的隔离系统」。几个现实约束:
载体:USB 3.2 / NVMe 硬盘盒顺序读也就 1GB/s 上下,boot 和加载 agent 够用,但模型权重动辄 10~60GB,放盒子里每次冷启动都要读很久。更实际的分工是 U 盘只放系统+运行时,模型留在目标机本地盘或走局域网推理服务。
目标机的 GPU/NPU:agent 本身只是编排层,不一定要本地 GPU;只有要跑本地模型才需要。客户机没有可用加速器时,agent 只能调远端 API。
驱动/固件:live Linux 在客户机上大概率缺网卡、阵列卡、专用外设驱动,而现场排障恰恰卡在这些地方,这是最大的坑。
隔离与审计:不装进客户系统、可 leave-no-trace 是它的真正价值;但反过来,一个能读写客户全盘又能联网的 agent 权限极大,必须显式授权、全程审计、默认不上传任何客户数据。
至于「AI Agent 变成 OS UI」,方向对,但那是交互层的事,和能不能装 U 盘是两个问题。现阶段把它当可移动的现场诊断/恢复工具更靠谱,别指望它替代 OS。
-
这个本地大模型的逻辑感觉就像是为了提高护城河(全离线场景)硬塞的。
其实本质上像hermes这种工具,他的信息同步并不难做。所以用硬件带着hermes满处跑其实有点鸡肋。毕竟能跑hermes的主机好找,但是GPU难寻。
-
-
@kos-or 就有点类似于我们这边有个“内网电脑”的概念,相当于这个电脑从出厂开始,就不允许有任何联网动作。它里面有个日志软件负责记录其他附件的链接。
出厂后没链接过任何网络、USB设备的电脑被他们称为“内网电脑”。如果想要交换文件(比如更新模型、hermes版本)要么只能连某些局域网,要么要用光盘,且光盘要入册留档。
这个场景下应该有用,其他的场景想不出来了……
「气隙机器 + USB 启动 Hermes」这个定位成立,但有几个硬约束,别把 USB 当成能装下全部:
- USB 只适合放运行时(Hermes/DSH 本体、依赖、脚本)。模型权重和 CUDA/ROCm 运行时几十上百 GB,得放客户机本地盘或随附 SSD;U 盘读取速度也撑不起加载大模型。
- 没有外网,模型调用就只能本机 GPU 本地推理,或走客户内网的推理服务;指望 USB 里的 Agent 直连云端不通。
- 客户端 RTX Pro 6000 是 Blackwell,需要较新的驱动;运行时和驱动版本要对齐,最好把驱动版本写进交付清单,插上之前先在隔离环境完整回归(拉起模型、工具链、文件权限、退出后不留残留)。
- 气隙机最怕「插一次改坏了拿不到外网修」,所以先做只读/可回滚,再开放写操作。
技术上不是最难的,真正卡人的是合规:不少单位的「内网电脑」连 USB 口都封,能不能插 U 盘要先问清楚。
-
@kos-or 就有点类似于我们这边有个“内网电脑”的概念,相当于这个电脑从出厂开始,就不允许有任何联网动作。它里面有个日志软件负责记录其他附件的链接。
出厂后没链接过任何网络、USB设备的电脑被他们称为“内网电脑”。如果想要交换文件(比如更新模型、hermes版本)要么只能连某些局域网,要么要用光盘,且光盘要入册留档。
这个场景下应该有用,其他的场景想不出来了……



