nikkigallery/Whimbox

何を解決するか

Whimbox はゲーム「Infinity Nikki」のプレイを自動化するための AI エージェントです。繰り返しの日常タスクの完了、世界のナビゲーション、特定のゲーム内アクティビティの実行を、手動操作なしで支援します。

動作方法

このシステムは、大規模言語モデル（LLMs）と画像認識（OCR、YOLO）を組み合わせたバックエンドサービスとして機能します。ゲームファイルを変更したり、メモリを読み取ったりすることなく、スクリーンショットを取得し、マウスおよびキーボード入力をシミュレートしてゲームを制御します。自然言語コマンドや専用アプリから制御可能です。

対象ユーザー

中〜高スペックのPCを持っている「Infinity Nikki」のプレイヤーで、日常のルーティン、リソース収集、複雑なタスクの自動化を希望する方。

主な特徴

• 日常タスクの自動化: 材料の採掘、試練、週次クエストなどを自動で処理。
• 世界のナビゲーション: パスの記録・編集が可能で、自動移動やリソース収集（釣り、虫取り、掃除）を実現。
• AI駆動の制御: 自然言語による対話やWeChat経由のリモート制御で機能を実行可能。
• マクロ記録: 特定の操作シーケンスを記録・再生可能。
• MIDI統合: MIDI音楽譜をゲーム内での自動ピアノ演奏用スクリプトに変換。