watzon/pindrop

解決する課題

Pindrop は、プライバシーとオフライン機能を最優先する Mac ネイティブの AI 音声入力アプリです。クラウド依存の音声認識を排除し、デバイス内ハードウェアを活用することで、音声を直接任意のアクティブなアプリに入力できます。音声データを外部サーバーに送信する必要がありません。

動作方法

アプリは macOS のメニュー バーで実行され、複数の音声認識エンジンを使用します。主に Apple Silicon 向けのネイティブ音声認識（WhisperKit：OpenAI Whisper on Core ML）、Parakeet、SenseVoice を使用しますが、OpenAI の GPT-4o モデルを介したオプションのクラウドベース音声認識も提供しています。マイクまたはシステム音声から音声をキャプチャし、ローカルで処理した後、macOS のアクセシビリティ権限を使用してカーソル位置にテキストを挿入するか、クリップボードにコピーします。

対象ユーザー

Apple Silicon Mac を搭載しているユーザーを含む、文章作成、音声メモの記録、会議の録音などに迅速かつプライバシーを重視した統合音声入力ツールが必要な macOS ユーザー。

特徴

• ローカル優先の音声認識：WhisperKit、Parakeet、SenseVoice など、複数のデバイス内エンジンをサポート。
• 統合ワークフロー：即時音声入力、音声メモ、別々の音声ソースを持つ完全な会議録音用の専用モードを備えています。
• AIによる強化：Apple Intelligence、Anthropic、Ollama などの提供元を使用して、トランスクリプトのオプションのクリーニングが可能。
• 開発者向け：AIエージェントがトランスクリプションライブラリとやり取りできる組み込み MCP サーバーを備えています。
• プライバシー重視：デフォルトで音声データとトランスクリプトをローカルに保存し、API キーは macOS Keychain を使用します。