ChocoWu/Awesome-Scene-Graph-Generation

이 프로젝트는 무엇인가요?

선별된 "awesome list" — 저자가 장면 그래프 생성(SGG)에 관한 핵심 리소스를 수집한 단일의 잘 정리된 저장소입니다. 이는 참조 색인이며, 소프트웨어 패키지 자체는 아니지만 많은 도구, 논문, 데이터셋으로 연결됩니다.

장면 그래프란 무엇인가요? (README 소개에서)

장면(텍스트, 이미지 또는 비디오에서)을 그래프로 설명하는 방법:

• 노드 = 객체. 카테고리 레이블, 속성, 경계 상자(객체가 있는 위치) 포함
• 엣지 = 객체 간의 쌍별 관계

이미지를 "사람 — 앉다 — 의자 위"와 같은 구조화된 설명으로 바꾸는 것으로 생각하세요.

내부 내용

• 🏷️ 데이터셋: 이미지, 비디오, 3D, 4D, 텍스트, 위성 이미지, 교통 장면, 1인칭 비디오 등 다양한 모달리티를 다루는 약 30개 이상의 데이터셋으로 구성된 대규모 표. 각 행에는 객체 클래스, 관계 클래스, 인스턴스 수와 같은 통계가 나열됩니다.
• 🧩 장면 표현: 장면을 표현하는 8가지 방법으로 구성된 논문 — 패치/토큰, 객체 중심 슬롯, 신경 암시적 필드(NeRF 등), 명시적 3D, 동적/4D/비디오, 월드 모델 잠재, 언어 기반, 기호/프로그램 기반.
• 🍕 장면 그래프 생성: 작업 유형별로 분류된 논문 — 2D 이미지 SGG, 파놉틱 SGG, 시공간 비디오 SGG, 오디오 SGG, 3D/4D SGG, 텍스트 SGG, 맵 공간 SGG, 범용 SGG, 월드 SGG.
• 🥝 응용 분야: 장면 그래프가 어떻게 사용되는지 — 이미지/비디오 검색, 캡셔닝, 생성, 시각적 추론, 3D 장면 생성, 비전-언어 모델의 환각 감소 등.
• 🤶 기타: 평가 지표, 툴킷, 워크숍, 설문 조사, 주목할 만한 작업.

툴킷 하이라이트 (README에 링크됨)

여러 도구가 나열되어 있습니다:

• Stanford Scene Graph Parser, SceneGraphParser, FactualSceneGraph — 텍스트-장면 그래프 파서
• Scene-Graph-Benchmark.pytorch, SGG-Benchmark — 벤치마크 코드베이스(SGG-Benchmark는 일반적인 접근 방식의 "최신이고 실행하기 쉬운" 구현으로 설명됨)
• SGG-Annotate — COCO 형식의 시각적 관계를 위한 현대적인 주석 도구
• RelateAnything — 모든 입력에서 실시간, 개방형 어휘 관계 예측

유지 관리자의 뉴스 및 최근 추가 사항

• OmniSG — 텍스트, 이미지, 비디오, 3D 장면 그래프 파싱을 위한 통합 툴킷. 웹 UI 데모 및 평가 스크립트 포함
• VSG-Annotator — 비디오 장면 그래프 주석 도구
• Scene Graph Series — 그들의 모든 장면 그래프 관련 작업을 모은 프로젝트 웹사이트
• WACV26 워크숍 "Scene Graph for Structured Intelligence"(컴퓨터 비전 회의 워크숍)

커뮤니티 및 토론

이 저장소는 Issues 탭에서 "Hot Topics" 섹션을 운영합니다 — 다음과 같은 공개 스레드:

• "장면 그래프가 여전히 장면을 표현하고 이해하는 좋은 방법인가요?"
• "월드 모델에 객체가 필요한가요?"

유지 관리자는 기여, 협업, 그리고 이 분야의 미래에 대한 논의를 명시적으로 환영합니다.