Meta Muse Gadgetsとは？AIの外部デバイスで何ができる？

Meta Muse Gadgetsとは？

MetaのオープンソースMuse Gadgets SDKは、AIデバイス開発のためのツールキットです。公式リポジトリにはESP32向けとLinux向けのSDKコードがあり、ディスプレイ、ボタン、センサー、スピーカーなどの周辺機器とエージェントをつなぐ例が含まれています。HomeLinkではスマートホームとの連携も扱います。エージェントをチャット画面の外にある入力・出力につなぐのが共通の考え方です。

MuseはフィジカルAIを試作する開発者向けの出発点です。ボードや周辺機器、完成形は開発者の構成によって異なります。ボタンは入力、センサーは周辺状況の把握、電子ペーパーやスピーカーは短い結果の表示に使えます。作業場所に置く合図を工夫すれば、エージェントが裏で動いている間も別の仕事に集中できます。

AIデバイスはデスクで何ができる？

Claude desktopにファイル編集を頼み、その間に別の作業を確認している場面を想像してください。InksPetはEleksCavaの電子ペーパーに活動を表示します。ピクセルのカニが動き、RGBライトが作業状態を示し、短いステータスが見える場所に残ります。メイン画面は目の前の作業に使えます。

対応するClaude desktop Hardware Buddyの操作で許可が必要になると、ライトが黄色く点滅し、デバイスにリクエストが表示されます。Aで許可、Bで常に許可、Cで拒否できます。許可後は作業状態が緑になり、完了時には緑のフェードでCompletedを示します。隠れたダイアログを探さず、デスクで流れを確認できます。

電子ペーパーに必要な情報を置き、ライトで変化に気づく使い方です。Codexでは、案内済みのローカルブリッジが対応するhook状態をデバイスに送ります。物理ボタンの説明は対応するClaude desktop Hardware Buddyの権限確認に限り、操作は連携ごとに異なります。長めの編集でも、停止前に依頼に気づいて応答し、その後の進行と完了を確認できます。

2.9インチ、296×128ドットの電子ペーパー画面には短いタスク概要を表示できます。5つのRGBライトが状態変化を知らせ、3つの物理ボタンで対応する操作に応答できます。キーボードの横でひと目で確認するための表示面として、エディターやチャットを補います。

InksPetとMuseは別のプロジェクト

InksPetファームウェアはEleksCavaの電子ペーパーハードウェアで動きます。現在の製品ではClaude desktop Hardware Buddyとのネイティブ接続とCodex向けローカルブリッジを案内しています。InksPetはMuse SDKで検証していないため、これらの既存連携を基準にご検討ください。利用にMuseアカウントやTokenは必要ありません。

Museで開発する場合、現在のSDK利用条件ではSDK Tokenは個人の非商用利用に限られ、販売・宣伝する製品への組み込みは禁止されています。

デスクで試す

EleksCavaをお持ちなら、ブラウザー版ファームウェアインストーラーでInksPetを導入し、セットアップガイド（英語）に沿って設定できます。ガイドではデバイス設定と対応する連携を説明しています。

ハードウェアを購入する場合は、EleksCavaのAI Companionページで最新の製品・購入情報をご確認ください。デバイスはEleksCavaが提供し、InksPetはピクセルのカニとAIコンパニオン機能を加えるファームウェアです。現在の構成や同梱品は商品ページでご確認ください。

Museは、AIインターフェースに部屋の中の画面、ライト、ボタンも使えるという流れを示しています。InksPetは、対応連携があるデスクデバイスでその考えを試す方法のひとつです。