https://teamknox.com/tech/robotics/robocar/physicalconnect/muse/index.html 特徴 ここでは、museの一般的な特徴ではなく、ハードウェアの制御に焦点を当てる。museは元々、エージェント機能を売りにしていたところがあり、それは人間とのwebを通しての会話だけでなく、他のアプリを操作し結果を得ることに特徴があった。Muse Gadgetsは、そのエージェントを外部のハードウェアに拡張し操作を出来るようにしたものである。 期待する効果 Muse Gadgetsをラズパイにインストールして操作をMuseに委ねる。既にある成果物から、所望の動作を組み立て実行させる。 Hugo ja-jp https://teamknox.com/tech/robotics/robocar/physicalconnect/muse/deliverable/index.html Mon, 01 Jan 0001 00:00:00 +0000 https://teamknox.com/tech/robotics/robocar/physicalconnect/muse/deliverable/index.html デバイスの動作 このセクションでは、muse gadgetでのデバイス操作の実験結果を記録していく。 irMagician NASとして利用しているラズパイに接続してあるirMagicianには既に複数のリモコンとして利用するためのWebアプリやより低レイヤーのirMagicianが持つttyACMを操作するためのpythonスクリプトなどがある。これらを横断して読み込ませる。 結果 museとのチャットにおいて、**「テレビの電源を入れて」**で所望の動作が完遂。逆の動作である電源オフやBSへのモードやチャンネル変更も出来た。 考察 現時点(2026/11/4)での、Gemini-CLIより精度が高く実行も速い。Gemini-CLIの場合は上記のような横断的な探索を依頼した時に探しきれない事が多い。また、README.mdなどを参照しても意味が理解できないことが多く、実行には至らなかった。今後は別のデバイスにも広げていく。