cosanlab/py-feat

Facial Expression Analysis Toolbox

해결하는 문제

Py-FEAT는 이미지 및 동영상에서 얼굴 표정(FEX)을 분석하기 위한 포괄적인 툴킷을 연구자들에게 제공합니다. 감정 상태, 근육 움직임, 얼굴 랜드마크를 추출하는 과정을 단순화하여 별도의 여러 도구를 통합해야 했던 번거로움을 줄여줍니다.

작동 방식

이 라이브러리는 Detectorv1 클래스를 사용하여 시각 데이터를 처리합니다. 자동으로 HuggingFace Hub에서 필요한 모델 가중치를 다운로드하며, CPU, NVIDIA GPU(CUDA), Apple Silicon(MPS)에서 실행할 수 있습니다. 이 스위트는 얼굴 탐지부터 특정 얼굴 특징 추출까지 전체 파이프라인을 처리하고, 전처리, 분석, 시각화를 위한 메서드를 제공합니다.

대상 사용자

주로 얼굴 표정 분석 및 감정 컴퓨팅 분야의 연구자들을 위한 것입니다.

주요 기능

  • 감정 표현(예: 기쁨, 슬픔, 분노) 추출.
  • 액션 유닛으로 알려진 얼굴 근육 움직임 감지.
  • 얼굴 랜드마크 식별.
  • CPU, CUDA, Metal(MPS)에서 하드웨어 가속 지원.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • Dispatch
  • 프로젝트