ChocoWu/Awesome-Scene-Graph-Generation

このプロジェクトは何ですか？

厳選された**「awesomeリスト」** — 著者がシーングラフ生成（SGG）に関する主要なリソースを収集した、単一の整理されたリポジトリです。これは参照インデックスであり、ソフトウェアパッケージ自体ではありませんが、多くのツール、論文、データセットへのリンクを提供します。

シーングラフとは？（READMEのイントロから）

シーン（テキスト、画像、または動画から）をグラフとして記述する方法：

• ノード = オブジェクト。カテゴリラベル、属性、バウンディングボックス（オブジェクトの位置）を持つ
• エッジ = オブジェクト間のペアワイズ関係

画像を「人 — 座っている — 椅子の上」のような構造化された記述に変換すると考えてください。

中身

• 🏷️ データセット：画像、動画、3D、4D、テキスト、衛星画像、交通シーン、一人称動画など、多くのモダリティをカバーする約30以上のデータセットの大規模な表。各行には、オブジェクトクラス、関係クラス、インスタンス数などの統計がリストされています。
• 🧩 シーン表現：シーンを表現する8つの方法に整理された論文 — パッチ/トークン、オブジェクト中心スロット、ニューラル暗黙場（NeRFなど）、明示的3D、動的/4D/動画、ワールドモデル潜在、言語基盤、記号/プログラムベース。
• 🍕 シーングラフ生成：タスクタイプ別に分けられた論文 — 2D画像SGG、パノプティックSGG、時空間動画SGG、オーディオSGG、3D/4D SGG、テキストSGG、マップ空間SGG、ユニバーサルSGG、ワールドSGG。
• 🥝 アプリケーション：シーングラフの使用方法 — 画像/動画検索、キャプショニング、生成、視覚推論、3Dシーン生成、視覚言語モデルの幻覚低減など。
• 🤶 その他：評価指標、ツールキット、ワークショップ、サーベイ、注目すべき作品。

ツールキットのハイライト（READMEにリンク）

いくつかのツールがリストされています：

• Stanford Scene Graph Parser、SceneGraphParser、FactualSceneGraph — テキストからシーングラフへのパーサー
• Scene-Graph-Benchmark.pytorch、SGG-Benchmark — ベンチマークコードベース（SGG-Benchmarkは一般的なアプローチの「最新で実行しやすい」実装と説明されています）
• SGG-Annotate — COCO形式の視覚的関係のための最新のアノテーションツール
• RelateAnything — 任意の入力からのリアルタイム、オープンボキャブラリ関係予測

メンテナーによるニュースと最近の追加

• OmniSG — テキスト、画像、動画、3Dシーングラフ解析のための統合ツールキット。Web UIデモと評価スクリプト付き
• VSG-Annotator — 動画シーングラフをアノテーションするためのツール
• Scene Graph Series — 彼らのシーングラフ関連のすべての作業を集めたプロジェクトウェブサイト
• WACV26ワークショップ「Scene Graph for Structured Intelligence」（コンピュータビジョン会議ワークショップ）

コミュニティとディスカッション

このリポジトリは、Issuesタブに**「Hot Topics」**セクションを運営しています — 以下のようなオープンスレッド：

• 「シーングラフはまだシーンを表現し理解する良い方法ですか？」
• 「ワールドモデルはオブジェクトを必要としますか？」

メンテナーは、貢献、コラボレーション、そしてこの分野の未来についての議論を明示的に歓迎しています。