
文章摘要
「想让 AI 悬浮在屏幕上,直接帮我处理正在看的内容……」
【2026】Hermes HUD 模式完全指南!能在屏幕上「看・理解・操作」的悬浮式 AI 智能体
「想让 AI 悬浮在屏幕上,直接帮我处理正在看的内容……」 「不想来回切换窗口,想让 AI 直接操作我正在用的应用……」
实现这一愿望的新功能已经登场:Hermes 桌面应用中的「HUD 模式」。
与普通 AI 聊天需要打开单独窗口不同,HUD 模式将 Hermes 以半透明图层(悬浮层)的形式浮现在你正在使用的应用之上。Hermes 可以直接看到、理解、甚至操作下方的应用。
在真实演示中,它完成了多种任务——摘要 X(Twitter)帖子、分析 TradingView 图表、操作视频编辑软件。该功能延续了引发热潮的 Claude Code 相关帖子(57,000+ 赞)的势头,备受关注(X 帖子本身获得 288 个赞)。
本文将面向初学者,完整讲解 Hermes HUD 模式的原理、使用方法和能做什么。
本文你能了解到什么
- Hermes HUD 模式是什么(与传统聊天的区别)
- 能做什么(演示视频中的 3 种用法)
- 「看・理解・操作」屏幕的原理
- Hermes 桌面的下载方法
- 注意事项与未来展望
Hermes HUD 模式是什么?
Hermes HUD 模式是 Nous Research 开发的开源 AI 智能体「Hermes」桌面应用中新增的功能。
与传统 AI 聊天的区别
| 项目 | 传统 AI 聊天 | Hermes HUD 模式 |
|---|---|---|
| UI 形态 | 打开单独窗口使用 | 悬浮在正在使用的应用上 |
| 位置 | 需要切换窗口 | 可拖动到屏幕任意位置 |
| 对应用的理解 | 手动提供截图等 | 直接看到下方的应用画面 |
| 操作 | 只能下达指令 | 可代为操作应用 |
| 工作连续性 | 切换会中断工作 | 不打断工作即可求助 |
实际能做什么(来自演示视频)
X 用户 tonbi(@tonbistudio) 发布了约 4 分半的演示视频,在 HUD 模式中演示了以下 3 件事:
1. 阅读并摘要 X(Twitter)帖子
Hermes 会直接识别并解释下方打开的 X 帖子或视频的内容。
- 摘要时间线上刷到的帖子
- 读取并讲解视频内容
- 「这个帖子太长了,帮我摘要一下」当场完成
2. 分析 TradingView 图表
把 NVIDIA 的 1 小时图表给 Hermes 看,它会自动分析。
- 自动识别并讲解 Fair Value Gaps(FVGs,公允价值缺口)
- 指出「哪里是未回补的缺口」
- 分析「多头・空头失衡」
像图表分析这样的专业工作,只要给它看屏幕就能完成。
3. 操作视频编辑软件(Clipchamp)
它还能实际代你操作应用。
- 新建项目
- 添加文件
- 实际执行点击操作
视频最后还展示了「彩蛋功能」。
「看・理解・操作」的原理
HUD 模式的核心是一个 3 步循环:「看(View)→ 理解(Understand)→ 操作(Use)」。
| 步骤 | 内容 |
|---|---|
| 看(View) | 直接截取正在使用的应用画面(截图等) |
| 理解(Understand) | 用视觉模型解读屏幕上的文字、图表和 UI 元素 |
| 操作(Use) | 执行点击、输入等操作,真正驱动应用 |
最直观的理解方式:HUD 模式把 Hermes 原有的「浏览器操作」「截图分析」等能力扩展到了整个桌面。
Hermes 桌面的下载方法
使用 HUD 模式需要 Hermes 桌面应用。请从下面的官方网站下载。
📥 下载 URL
官方网站: https://hermes-agent.nousresearch.com/
| 系统 | 下载 |
|---|---|
| macOS(12 及以上) | Hermes-Setup.dmg |
| Windows(10/11) | Hermes-Setup.exe |
| Linux(任意发行版) | 通过终端安装 |
Linux:
curl -fsSL https://hermes-agent.nousresearch.com/install.sh | bash
Windows(PowerShell):
iex (irm https://hermes-agent.nousresearch.com/install.ps1)
补充: 下载 URL 中的
?build=参数是构建号,建议访问官方网站确认最新版本。
Hermes 本身的特点(复习)
作为 HUD 模式基础的 Hermes,具有以下特点:
- 自我改进型智能体: 用得越多,学到的技能越多,越聪明
- Nous Research 出品・开源: MIT 许可证,支持 macOS / Windows / Linux
- 多平台: 除了桌面应用,同一个智能体还能在 Telegram、Discord、CLI 等平台运行
- 60+ 内置工具: 搜索、浏览器、图像生成、语音等
- 提供商自由: 支持 OpenRouter、OpenAI、Anthropic、Google、本地模型等 20 多个提供商
注意事项・未来展望
- 新功能,信息有限: 截至 2026 年 8 月,官方文档还没有独立页面(主要信息来源是演示视频和 X 帖子)
- 仅限桌面应用: HUD 模式是桌面应用的功能,不是 CLI 或消息平台的功能
- 界面变化的应对是关键: 评论中已有人问「当界面意外变化时,操作有多可靠?」
- 期待未来发展: 该领域发展迅速,已经出现 cron 集成等需求
总结
Hermes HUD 模式是「让 AI 看・理解・操作屏幕」的悬浮式 AI 智能体的新形态。
- 不是单独窗口,而是悬浮在正在使用的应用之上
- 演示过的用法:摘要 X 帖子、分析 TradingView 图表、操作视频编辑软件
- 不用打断工作,直接说「帮我读这个」「分析这个图表」
- 需要 Hermes 桌面应用(官方网站免费下载)
「让 AI 理解屏幕上的内容,当场帮你工作」—— 这种次世代 AI 助手体验,先安装 Hermes Desktop 试试吧。
この記事をシェアする
相关文章

2026年7月19日
【2026】什么是智能体工程(Agentic Engineering)?Karpathy 提出、Google Agents CLI 改变正式开发

2026年7月19日
【2026】AI 智能体学习推荐免费课程 12 选!世界顶尖讲师团队的实战课程彻底解析

2026年8月8日
Claude Code 跨会话消息完全指南 2026!会话之间可以互相发送消息

2026年8月8日
【2026】用 Claude Code 控制 iPhone!phone-harness 完全指南(附设置步骤)

2026年8月9日
【2026】Herdr 完全指南 — 任何智能体之间都能对话!多 AI 编码智能体的新标准运行时

2026年8月9日
【2026】Learn Claude Code 完全指南!20 个会话从零打造自己的 AI 智能体的免费学习网站