Pixel-Talk/PEAR

해결하는 문제

PEAR는 실시간으로 표현력 있는 3D 인간 메시 회복의 과제를 해결합니다. 이미지나 비디오에서 표현력 있는 인간 메시(EHM-s) 파라미터를 동시에 예측할 수 있으며, 표현력을 희생하지 않고도 높은 속도와 세부 정보를 제공합니다.

작동 방식

PEAR는 픽셀 정렬 방식을 사용하여 3D 인간 메시를 회복하는 통합 프레임워크입니다. 효율성을 중시하여 100 FPS로 실시간 처리가 가능하며, 인간의 몸, 얼굴, 손의 표현적인 움직임을 포착할 수 있습니다.

대상 사용자

이 프로젝트는 3D 인간 재구성, 컴퓨터 비전, 디지털 인간 애니메이션 분야에서 일하는 연구자 및 개발자, 그리고 SMPL, SMPLX, FLAME 같은 모델을 활용하는 사람들에게 적합합니다.

주요 특징

• 실시간 성능: 100 FPS로 EHM-s 파라미터 예측 가능.
• 통합 프레임워크: 표현력 있는 3D 인간 메시 회복을 위한 단일 시스템.
• 다양한 모델 지원: SMPL, SMPLX, FLAME와 호환.
• 다양한 입력 지원: 이미지 및 비디오 추론 모두 지원.