murtaza-nasir/speakr

해결하는 문제

Speakr는 오디오 및 비디오 녹음을 체계적이고 검색 가능한 노트로 변환하기 위한 개인용 셀프 호스팅 플랫폼을 제공합니다. 이는 타사 클라우드 스토리지나 SaaS 플랫폼에 의존하지 않고 대량의 회의나 강의 녹음을 관리해야 하는 개인정보 보호를 중시하는 사용자들의 요구를 해결합니다.

작동 방식

Speakr는 사용자가 선호하는 전사 엔진(WhisperX, OpenAI 또는 다양한 셀프 호스팅 ASR 서비스 등)에 연결되는 중앙 허브 역할을 합니다. 오디오가 캡처되거나 업로드되면 플랫폼은 자동으로 이를 전사하고, 화자를 식별(화자 분리)하며, 구성 가능한 AI 프롬프트를 사용하여 요약이나 작업 항목을 생성합니다. 사용자는 원본 오디오의 특정 타임스탬프를 인용하는 채팅 인터페이스를 통해 라이브러리와 상호 작용하거나, 에이전트 모드를 사용하여 여러 녹음에 걸쳐 복잡한 조사를 수행할 수 있습니다.

대상 사용자

오디오 데이터의 안전하고 장기적인 저장이 필요하며, 회의록, 연구 노트, 학습 가이드와 같이 구어체 콘텐츠를 실행 가능한 지식으로 자동 변환해야 하는 개인, 연구 팀 또는 조직을 위해 설계되었습니다.

주요 특징

• 유연한 전사: WhisperX, OpenAI 및 VibeVoice나 OpenASR과 같은 셀프 호스팅 옵션을 포함한 여러 백엔드를 지원합니다.
• 에이전트형 리서치: 전체 녹음 라이브러리에서 정보를 검색하고 종합할 수 있는 옵트인 AI 연구원 기능을 제공합니다.
• 개인정보 보호 우선: SSO 및 세밀한 액세스 제어를 지원하며, 완전히 사용자의 자체 인프라에서 실행됩니다.
• 사용자 정의 가능한 워크플로우: "스마트 태그"를 사용하여 녹음 유형에 따라 특정 AI 프롬프트와 전사 설정을 자동으로 적용할 수 있습니다.
• 확장성: REST API 및 Webhook 지원이 포함되어 있어 Obsidian, n8n, Zapier와 같은 도구와 통합할 수 있습니다.