Nomily-Ai/nomily-app

해결하는 문제

Nomily AI는 음성 녹음을 구조화된 텍스트로 변환하기 위한 개인정보 보호 중심의 워크플로우를 제공합니다. 사용자가 직접 API 키(BYOK)를 가져와 전사 및 요약에 사용할 수 있도록 하여 중앙 집중식 호스팅 전사 서비스에 대한 의존도를 없애고, 사용자가 선택한 AI 제공업체를 직접 제어할 수 있도록 보장합니다.

작동 방식

이 시스템은 네이티브 클라이언트로서 다양한 소스(V05E BLE 레코더, iPhone, Apple Watch)의 오디오 녹음을 관리합니다. 그런 다음 이 오디오를 사용자가 설정한 ASR(자동 음성 인식) 제공업체(Azure Speech 또는 로컬 faster-whisper 엔드포인트 등)로 라우팅하여 전사 및 화자 분리(diarization)를 수행합니다. 마지막으로, 생성된 전사본을 선택한 LLM 제공업체(OpenAI, Anthropic, Gemini, OpenRouter, Ollama 등)로 전송하여 요약, 제목 및 번역을 생성합니다.

대상 사용자

이동 중에 녹음을 자주 하며, 독점적인 클라우드 계정에 의존하지 않고 전사 및 AI 기반 합성을 위한 네이티브 모바일 경험(iOS/Android)을 원하는 개인을 위해 설계되었습니다.

주요 특징

• Bring Your Own Key (BYOK): 사용자가 전사 및 LLM 서비스 모두에 대해 자신의 API 키를 직접 설정할 수 있습니다.
• 멀티모달 입력: V05E BLE 레코더, iPhone 가져오기 및 전용 Apple Watch 컴패니언 앱을 지원합니다.
• 유연한 ASR: 화자 분리(최대 10명)를 지원하는 Azure Speech 또는 로컬 ASR 엔드포인트를 지원합니다.
• 광범위한 LLM 지원: OpenAI, Anthropic, Gemini와 같은 주요 제공업체와 통합되며, Ollama를 통한 로컬 옵션도 지원합니다.