Laxcorp-Research/project-raven
Open-source AI meeting copilot - real-time transcription, echo cancellation, and AI assistance. Captures system audio + mic, cancels echo via WebRTC AEC3, transcribes with Deepgram, and gives you Claude/OpenAI help during meetings. Runs locally on macOS and Windows.
解決的問題
Project Raven 是一個開源的會議協作者,專為在虛擬會議期間與之後進行錄音、轉錄,並提供 AI 驅動的協助而設計。它透過提供隱蔽的 AI 建議覆疊層與自動會後摘要,解決了手動記筆記與會議中缺乏即時引導的問題。
運作方式
Raven 是一個 Electron 桌面應用程式,使用原生輔助工具(macOS 上的 ScreenCaptureKit/CoreAudio,Windows 上的 WASAPI)來捕獲麥克風與系統音訊。它利用 GStreamer 實現本地回音消除,確保使用者與對方參與者的轉錄串流皆清晰乾淨。
轉錄透過與 Deepgram 或 AssemblyAI 的 Bring-Your-Own-Key (BYOK) 整合完成。AI 協助由 Anthropic 或 OpenAI 提供,處理即時轉錄、可選的螢幕截圖,以及本地儲存的文件。資料保持私密:錄音與筆記儲存在本地 SQLite 資料庫中,RAG(檢索增強生成)在裝置上使用 MiniLM 嵌入模型執行。
適用對象
適用於經常在 Zoom、Google Meet、Microsoft Teams 和 Webex 等平台參加虛擬會議的專業人士,他們希望獲得 AI 驅動的洞察與摘要,卻不願將資料傳送至第三方主機後端。
主要特色
- 雙流捕獲:分離「你」與「他們」,以提升轉錄準確度。
- 隱蔽覆疊層:AI 助手介面對螢幕共享軟體不可見。
- 資料主權:本地 SQLite 儲存與 BYOK AI/STT 提供商;不使用 Raven 伺服器。
- 本地 RAG:可上傳文件(.txt、.md、.pdf、.docx)以在會議期間提供具上下文感知的 AI 協助。
- 自動會後工作流程:自動產生結構化待辦事項、後續郵件草稿與談話比例分析。
- 會議自動啟動:偵測到會議視窗後,提示或自動開始錄製。
相關
- 專案
- 專案
- 專案
- 專案
- 專案