shinshin86/mesh-avatar-studio

解決する課題

このプロジェクトは、静止画のイラストからアニメーション化された2Dアバターを作成するプロセスを簡素化します。リギング、レイヤー分け、メッシュ変形といった複雑な工程を自動化し、1枚の画像から瞬き、会話、揺れ、顔の動きを追跡してストリーミングできるキャラクターを作成できるようにします。

仕組み

ワークフローは、AIによる自動化と手動の微調整を組み合わせたものです。まず、コーディングエージェント（Claude Code や Codex など）がアップロードされた画像を処理し、初期リグ、レイヤーカット、メッシュ構造を作成します。次に、ユーザーはローカルエディタでプロジェクトを開き、メッシュポイントの手動調整、レイヤーマスクの修正、特定の口や目のバリエーションの生成を行います。完成したアバターは単一のファイルとしてエクスポートでき、MediaPipe を介したリアルタイムの顔認識とリップシンクをサポートするブラウザベースのライブストリーミングインターフェースで使用可能です。

対象ユーザー

3Dモデリングや複雑なアニメーションソフトウェアの高度な知識がなくても、独自のカスタムアニメーションアバターを作成したいストリーマー、VTuber、デジタルクリエイター向けに設計されています。

ハイライト

• AIコーディングエージェントを使用して、アバターのリギングとレイヤー分けの面倒な初期設定を自動化します。
• 正確な手動調整とライブプレビューのためのブラウザベースのローカルエディタを提供します。
• OBS などのストリーミングプラットフォーム向けに、リアルタイムの顔認識とマイクベースのリップシンクをサポートします。
• すべてのリグデータ、レイヤー、表情をバンドルしたエクスポート可能な .mavatar 形式が含まれています。
• ブラウザ上で直接アバターをテストおよび使用できる、インストール不要のプレイヤーを提供します。