TTPlanetPig/Comfyui_TTP_Toolset

解決する課題

ComfyUI TTP Toolsetは、従来の固定グリッドによるタイルベースのアップスケーリングにおける制限を解決します。標準的なグリッドでは、重要な視覚要素（顔、手、テキストなど）が分断されたり、複雑な焦点領域か単純な背景かに関わらず画像全体に均一な詳細レベルが適用されたりすることがよくあります。

仕組み

このプロジェクトの核となるのは、オブジェクト認識型タイルベースのimg2imgワークフローである Smart Tile 2.0 です。等間隔の正方形ではなく、視覚構造に基づいて可変サイズのタイルを作成します。

1. タイルの作成: ユーザーは手動でタイルを定義したり、マスクを描画したり、SAM3.1やQwenVL3による自動検出を使用して特定のオブジェクト（顔、目、手など）を識別したりできます。
2. ループ処理: 特殊なループシステム（Loop Source および Loop Collect）が、タイルを1つずつimg2imgサンプラーに送信します。これにより、タイルごとのプロンプト（QwenVLで自動生成）が可能になり、サンプリング前に各タイルを個別にアップスケールすることで、メガピクセル上限によるVRAM管理が可能になります。
3. インテリジェントな組み立て: 処理されたタイルは、セマンティックランキングシステムを使用して再結合されます。これにより、高精細な焦点タイル（目など）が、より大きなコンテキストタイル（顔や背景など）の上に、フェザリング、色補正、マスク認識ブレンディングを伴って重ねられ、継ぎ目を回避します。

対象ユーザー

ComfyUIを使用するデジタルアーティストやAI画像クリエイターで、詳細密度やオブジェクトの整合性を精密に制御しながら高解像度アップスケーリングを行う必要がある方（特に複雑なポートレートや詳細なシーン向け）。

ハイライト

• オブジェクト認識型タイリング: 視覚構造を分断するのではなく、構造に沿って配置される可変サイズのタイル。
• 自動プロンプト生成: QwenVLとの統合により、各タイルに固有のプロンプトを生成。
• セマンティックレイヤー: 組み立て時に、詳細度の高いタイル（顔、テキスト）を背景タイルよりも自動的に優先して配置するシステム。
• 効率的なループワークフロー: タイルを順次処理することで、ComfyUIグラフ内でのサンプラーチェーンの重複を回避。
• 柔軟な組み立て: GPUアクセラレーションによる貼り付け、ヒストグラム色補正、および複数の合成モード（例: safe_auto や replace_tile）をサポート。