cosanlab/py-feat

Facial Expression Analysis Toolbox

何を解決するか

Py-FEATは、画像および動画からの顔面表情(FEX)を分析するための包括的なツールキットを研究者に提供します。感情状態、筋肉の動き、顔のランドマークを抽出するプロセスを簡素化し、複数の別々のツールを統合する必要がなくなります。

動作方法

このライブラリは Detectorv1 クラスを使用して視覚データを処理します。自動的にHuggingFace Hubから必要なモデル重みをダウンロードし、CPU、NVIDIA GPU(CUDA)、Apple Silicon(MPS)で実行可能です。このスイートは顔検出から特定の顔面特徴の抽出まで、全体のパイプラインを処理し、前処理、分析、可視化のためのメソッドを提供します。

対象ユーザー

主に顔面表情分析および感情計算(affective computing)の分野における研究者向けに設計されています。

特徴

  • 感情表現(例:喜び、悲しみ、怒り)を抽出。
  • 表情筋の動きとして知られるアクションユニット(Action Units)を検出。
  • 顔のランドマークを特定。
  • CPU、CUDA、Metal(MPS)におけるハードウェアアクセラレーションをサポート。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • Dispatch
  • プロジェクト