yejy53/RealGen

해결하는 문제

RealGen은 AI 생성 이미지의 사실성 부족 문제를 해결하며, 특히 아티팩트를 제거하고 세부 사항을 강화하여 생성된 이미지를 실제 사진과 구별할 수 없게 만드는 것을 목표로 합니다.

작동 원리

RealGen은 Detector Reward-guided GRPO라고 불리는 사후 학습(post-training) 방식을 사용합니다. AIGC (AI-Generated Content) 탐지기를 보상 신호로 활용하며, 생성기가 AI 탐지기의 탐지를 "회피"하도록 학습되어 모델이 인위적인 패턴을 줄이고 물리적 충실도를 높이도록 강제합니다.

RealGen-V2는 동적인 GAN 영감 온라인 강화 학습 패러다임을 도입하여 이를 더욱 발전시켰습니다.

대상

이 프로젝트는 더 높은 수준의 사실성을 달성하고 AI 생성 아티팩트를 줄이고자 하는 텍스트-이미지 생성 분야의 연구자 및 개발자를 위한 것입니다.

주요 특징

• 탐지기 가이드 보상: 강화 학습을 통해 AI 탐지기를 사용하여 모델을 사실주의로 유도합니다.
• RealBench: 자동화된 Detector-Scoring 및 Arena-Scoring을 사용하여 사실성을 평가하는 새로운 벤치마크로, 인간 평가자의 필요성을 제거합니다.
• 고성능: 미적 요소와 세부 사항 면에서 일반 이미지 모델 및 특화된 사실적 모델보다 뛰어난 성능을 보입니다.
• 프레임워크 호환성: Dance GRPO 및 Flow GRPO와 같은 다양한 확산 모델 기반 GRPO 패러다임과 호환됩니다.