NativeSensors/EyeGestures

해결하는 문제

EyeGestures는 표준 웹캠이나 스마트폰 카메라를 사용하여 눈 추적 및 눈 제어 인터페이스를 구현할 수 있는 방법을 제공합니다. 이로 인해 고가의 전용 눈 추적 하드웨어가 필요 없어지며, 개발자와 사용자 모두가 접근성 도구와 눈 제어 소프트웨어를 더 쉽게 이용할 수 있게 됩니다.

작동 방식

이 프로젝트는 카메라에서 오는 영상 프레임을 처리하여 눈의 움직임을 추적하는 소프트웨어 라이브러리와 엔진(V4는 Rust 기반)을 제공합니다. Python과 JavaScript를 지원하여 웹 브라우저 또는 데스크톱 애플리케이션에서 사용할 수 있습니다. 시스템은 kalimat 캘리브레이션 프로세스를 포함하여 고정 및 사카데(빠른 눈 움직임)와 같은 특정 눈 동작을 감지할 수 있습니다.

대상 사용자

• 개발자: 접근성 소프트웨어나 눈 제어 인터페이스를 개발하고 싶은 사람.
• 사용자: 고가의 하드웨어에 투자하지 않고도 눈 제어 인터페이스가 필요한 사람.

주요 특징

• 하드웨어 독립적: 내장 웹캠과 스마트폰 카메라에서 작동.
• 크로스플랫폼: Python 라이브러리와 웹 브라우저용 JavaScript 라이브러리로 제공.
• 고급 추적 기능: 고정 및 사카데(빠른 눈 움직임) 감지.
• Rust 기반 엔진: 고성능 Rust 엔진(V4)을 사용해 다양한 플랫폼 간에 동일한 알고리즘을 유지.