iamsrikanthnani/pluely

解決する課題

Pluelyは、面接、営業電話、ライブデバッグ、講義など、AIの支援を受けるためにブラウザタブに切り替えることが不自然または目立ってしまうような、重要な状況向けに設計されています。現在のアプリケーションを離れたり、画面共有に映り込んだりすることなく、即座に回答や文字起こしを取得できる不可視のAIオーバーレイを提供します。

仕組み

Pluelyは半透明のデスクトップオーバーレイとして動作し、主に2つのモードを備えています。

• Ask Mode: テキスト、プッシュ・トゥ・トーク、または画面のスクリーンショットをキャプチャすることで質問できます。OCRを使用してドキュメントを読み取り、ファイルを添付して根拠に基づいた回答を得ることも可能です。
• Listen Mode: マイクとシステムオーディオをリアルタイムで文字起こしし、話者をラベル付けします。会話の流れに基づいて回答案を自動生成したり、リクエストに応じて回答を提供したりできます。

このシステムはTauriとReactで構築されており、プライバシー保護のためデータはローカルのSQLiteデータベースに保存されます。幅広いホスト型モデル（GPT, Gemini, Claude, Llama）をサポートしているほか、個人のAPIキーやローカルAI CLI（Ollamaなど）の使用も可能です。

対象ユーザー

ライブでのやり取り、会議、技術的なタスク中に、ワークフローを中断したり画面録画ソフトに検知されたりすることなく、リアルタイムのAIサポートを必要とする専門家、学生、求職者。

ハイライト

• Stealth Mode: 画面共有、録画、スクリーンショットには映りません。Dockやタスクバーから隠すことも可能です。
• リアルタイム文字起こし: 話者ラベル付きのライブ音声文字起こしと、自動応答の提案。
• 柔軟なモデルサポート: 200以上のホスト型モデルへのアクセス、または個人のAPIキーやローカルAI CLIとの統合。
• プライバシー重視: チャット、会議、文字起こしデータはローカルのSQLiteデータベースに保存され、会話内容は学習に使用されません。
• キーボード優先: オーバーレイの呼び出し、画面キャプチャ、文字起こしの管理を行うためのグローバルホットキー。