ace-trump-tech/MindPaw

何を解決するか

MindPawは、手頃な価格でオープンソースのデスクトップ四足ロボットです。シンプルなリモコン玩具と複雑なAIロボットの間のギャップを埋め、音声インタラクション、ジェスチャー認識、LLM駆動の会話機能を低コストのハードウェア（約¥50）に統合しています。

動作方法

ESP8266マイコンを基盤として、専用モジュールとソフトウェアロジックの組み合わせで構成されています：

• AI統合：Doubao LLM APIに接続し、テキスト、表情、物理的な動きを組み合わせて応答する知能的な会話を実現します。
• 認識機能：OV2640カメラでジェスチャー認識（軽量なMLPモデルを使用）を行い、HLK-V20モジュールで音声コマンド認識を実行します。
• インタラクション：OLEDスクリーンで7種類の感情を表示し、スピーカーで音声フィードバックを提供します。ブラウザベースのインターフェースにより、手動リモートコントロールが可能になります。
• 感情エンジン：インタラクションの頻度と内容に基づいて感情反応をシミュレートするPADモデル状態機械を実装しています。

対象ユーザー

• マイコン、サーボ、カメラ、AI APIの統合方法を学びたい趣味人や学生。
• ロボット工学や身体化AIへの予算に優しい入り口を探しているマーカー。
• エンベデッドハードウェア上で軽量ニューラルネットワークを実装したい開発者。

特徴

• 極めて低コスト：部品総額は約¥50（基本バージョンは¥35）。
• マルチモーダルインタラクション：音声、ジェスチャー、Webコントロールを組み合わせて動作をトリガーします。
• 身体化AI：LLMを活用して物理的反応と感情表現を駆動します。
• 完全オープンソース：すべてのC++ソースコード、PCB設計（LCSC/JLCPCB）、3Dプリント可能なSTLファイルを含みます。