akshayaggarwal99/jarvis-ai-assistant

해결하는 문제

Jarvis AI Assistant는 무료로 오픈소스인 음성 인식 도구로, 컴퓨터 어디서든 음성을 텍스트로 변환할 수 있습니다. 비용이 많이 드는 구독 서비스를 필요로 하지 않으며, 로컬 우선의 음성 인식과 AI 기반 텍스트 정제를 제공합니다.

작동 방식

사용자는 지정된 키(예: Fn 키)를 누르고 음성을 녹음한 후, 키를 떼면 녹음된 오디오가 텍스트로 변환됩니다. 시스템은 주로 두 가지 운영 모드를 지원합니다:

• 로컬 모드: Whisper 또는 NVIDIA Parakeet(Sherpa-ONNX를 통해)를 사용한 로컬 모델 기반 음성 인식과 Ollama를 통한 로컬 LLM 기반 텍스트 정제 및 포맷팅.
• 클라우드 모드: Deepgram과 Gemini를 사용한 더 빠른 클라우드 기반 음성 인식 및 텍스트 정제.

대상 사용자

텔레메트리와 구독 비용을 피하고 싶어하는 사용자, 특히 로컬에서 AI 모델을 실행하여 개인정보 보호를 원하는 사용자에게 적합합니다.

주요 기능

• 로컬 우선의 프라이버시: Whisper/Parakeet를 통한 완전한 로컬 음성 인식과 Ollama를 통한 로컬 LLM 지원.
• AI 후처리: 'um', 'like'와 같은 중간 말투를 자동 제거하고 문법을 수정하며, 텍스트를 재구성하거나 번호 매기기 가능.
• 사용자 정의 가능: 이메일 포맷팅이나 음성 입력 정제 방식을 조정할 수 있는 완전한 프롬프트 엔지니어링 기능.
• 시스템 전반 통합: 활성 창에 직접 텍스트를 삽입함으로써 모든 애플리케이션에서 작동.
• 크로스플랫폼 지원: macOS(Apple Silicon 및 Intel) 및 iOS(TestFlight를 통해)에서 사용 가능.