TechyCSR/OpenCluely

解決する課題

OpenCluelyは、技術面接や練習のための目立たないリアルタイムAIアシスタントを提供します。音声やスクリーンショットを通じて質問に対する即時の回答を提供し、WindowsおよびmacOS上の画面共有や録画ソフトから見えない形で表示します。

仕組み

このアプリケーションは、画面の最前面に配置されるステルスオーバーレイを使用します。音声（ローカルのWhisperまたはAzure Speechを使用）またはスクリーンショットを撮ることでトリガーできます。これらの入力はGoogle Geminiに送信され、会話履歴全体を使用してリクエストが処理されます。AIは、シンタックスハイライトされたコードブロックを含むフローティングウィンドウやチャットパネルに回答をストリーミングします。

対象ユーザー

技術面接のためのAI搭載練習ツールを求める個人向けに設計されています。画面共有ソフトにアシスタントの出力をキャプチャさせずに、セッション中にコードや概念を参照する必要があるユーザーに特に役立ちます。

ハイライト

• 不可視オーバーレイ： WindowsおよびmacOS上のZoom、Google Meet、Teams、Discord、OBSのキャプチャからウィンドウが隠されます。
• 直接的な画像分析： スクリーンショットはGeminiに直接送信されて視覚的推論が行われるため、低速なOCR処理を回避します。
• 柔軟な音声入力： オフライン文字起こし用のローカルWhisperまたはAzure Speechをサポートし、設定可能な音声アクティビティ検出機能を備えています。
• セッションコンテキスト： アプリは会話履歴を記憶しており、フォローアップの質問や複雑な技術的議論が可能です。
• プライバシー重視： このソフトウェアはテレメトリを収集せず、ローカルで実行され、セッションデータはデバイス内に保持されます。