AI 硬件

Meta Muse Gadgets 是什么?AI 实体外设能做什么?

Meta Muse Gadgets SDK 是什么?了解 ESP32、Linux 与实体外设如何连接 AI,以及 InksPet 如何显示 Agent 状态。

叠加 InksPet 界面示意的 EleksCava 电子纸设备
真实产品照片叠加了 InksPet 屏幕示意;显示状态为界面示意图,并非真实设备会话录像。

Meta Muse Gadgets 是什么?

Meta 开源的 Muse Gadgets SDK 是一套 AI 设备开发工具。官方仓库包含面向 ESP32 和 Linux 的 SDK 代码,以及将 Agent 连接到显示屏、按键、传感器、音箱等外设的示例。HomeLink 还探索智能家居交互。共同点是让 Agent 使用聊天窗口之外的实体输入和输出。

Muse 为开发者试制实体 AI 提供起点。按键接收简单输入,传感器提供附近环境信息,电子纸或音箱返回简短结果。设计者可以考虑工作桌面需要哪种提示,让 Agent 在后台运行时,人仍能专注于手头任务。

AI 实体设备能为桌面带来什么?

想象你让 Claude desktop 修改文件,同时自己在查看另一项工作。InksPet 会在 EleksCava 电子纸屏幕上反映 Agent 活动:像素小螃蟹会动,RGB 灯光显示工作状态,简短信息一直留在视线附近。电脑主屏可以继续显示手头任务。

当受支持的 Claude desktop Hardware Buddy 操作需要审批时,黄灯闪烁,设备显示请求。按 A 允许、按 B 始终允许、按 C 拒绝。批准后任务状态变为绿色;完成时,InksPet 以绿色渐隐显示 Completed。无需寻找被窗口挡住的弹窗,就能在桌边跟上流程。

电子纸保留必要信息,灯光提醒你状态变化。对 Codex,InksPet 已说明的本地桥接会把受支持的 hook 状态发送到设备。这里的实体按键流程适用于受支持的 Claude desktop Hardware Buddy 权限请求,具体控制方式依赖各自的接入方式。长时间编辑代码时,你可以在 Agent 暂停前注意请求,在设备上回应,再查看进度与完成状态。

2.9 英寸、296×128 像素的电子纸屏幕可显示简短任务摘要,5 个 RGB 灯提示状态变化,3 个实体按键处理受支持的响应。它是键盘旁一块方便扫视的状态屏,用来补充编辑器和聊天界面。

InksPet 与 Muse 是独立项目

InksPet 固件运行在 EleksCava 电子纸硬件上。当前产品文档包含 Claude desktop Hardware Buddy 原生连接,以及 Codex 本地桥接。InksPet 尚未通过 Muse SDK 兼容性验证,请根据上述已有接入选择;使用这些功能不需要 Muse 账户或 Token。

如果你用 Muse 开发,Meta 当前的 SDK 条款将 SDK Token 限定为个人非商业用途,并禁止嵌入销售或推广的产品。

在桌面开始体验

如果你已有 EleksCava 设备,可以通过浏览器版固件安装器安装 InksPet,再按照设置指南(英文)完成配置。指南介绍设备设置和已支持的接入方式。

如果你准备购买硬件,可以到 EleksCava AI Companion 页面查看当前产品和购买信息。EleksCava 提供设备,InksPet 是为它加入像素螃蟹 Agent 伙伴功能的固件。请在产品页面确认当前配置和包装内容。

Muse 让更多人看到,AI 界面也可以包含房间里的屏幕、灯光或按键。InksPet 则让你通过已有并公开说明接入方式的桌面设备,亲自体验这个想法。

让 AI Agent 在你的桌面拥有一席之地。

了解 InksPet 使用的 EleksCava 设备、当前购买选项,以及固件的使用方式。

设置指南目前提供英文版。 设置指南(英文)