cyx2333hhh/talk-type

해결하는 문제

Talk-type은 macOS 사용자를 위한 원활한 음성-텍스트 변환 경험을 제공하며, 특히 중국어와 영어의 이중 언어 입력 문제와 어떤 활성 애플리케이션에도 바로 삽입할 수 있는 문법적으로 올바른 텍스트의 필요성을 해결합니다.

작동 방식

이 도구는 다층적 인식 파이프라인을 사용합니다. 먼저 Apple Speech를 실시간 변환에 활용합니다. 실패할 경우 whisper-cli를 통해 로컬 Whisper Small 모델로 폴백합니다. 이중 언어 지원을 위해 대체 언어로 두 번째 단계를 수행하여 정확도를 보장합니다. 변환된 텍스트는 선택적 AI 정제 레이어(OpenAI, Claude, DeepSeek 등 다양한 제공업체 지원)를 통해 처리되며, 커서 주변의 문맥을 활용해 문장 부호와 문장 구분을 수정한 후, macOS Accessibility API를 사용해 포커스된 앱에 텍스트를 삽입합니다.

대상 사용자

글쓰기, 메시징, 메모 작성 등에서 자주 음성 입력을 사용하고, 혼합 언어 입력 및 AI 기반 텍스트 정제 기능이 필요한 macOS 사용자에게 적합합니다.

주요 기능

• 이중 언어 지원: 중국어, 영어 및 혼합 언어 입력을 네이티브로 처리.
• 로컬 폴백: 시스템 음성 인식이 실패했을 때 whisper.cpp를 통해 오프라인/로컬 변환을 통합.
• AI 기반 정제: 여러 LLM 제공업체를 지원하여 트랜스크립트를 완성도 높은 텍스트로 개선.
• 앱 간 통합: macOS Accessibility 기능을 사용해 포커스된 입력 필드에 직접 텍스트를 작성.