lycohana/BiliSum
为 Bilibili、YouTube 及本地视频提供 AI 视频摘要和知识库.AI video summarizer and knowledge base for Bilibili, YouTube and local videos.
它解決的問題
BiliSum 解決了從長篇視頻內容中提取和整理知識的困難。它自動將 Bilibili、YouTube 或本地檔案的視頻轉換為結構化文字、視覺筆記和可搜尋的知識庫,無需手動轉錄或做筆記。
如何運作
該工具遵循一個流程:導入視頻內容,使用 ASR(自動語音辨識)進行轉錄,然後利用 LLM 和 VLM(視覺語言模型)生成摘要、結構化筆記和思維導圖。它能提取關鍵畫面,創建「VLM 可理解」的視覺筆記,將圖像根據視覺上下文整合到文字中。對於長期儲存,它使用嵌入(embeddings)建立本地的 RAG(檢索增強生成)系統,實現跨多個視頻的語義搜尋與問答。
適用對象
專為學生、研究人員和終身學習者設計,他們觀看教育或資訊性視頻內容,並希望將這些內容轉化為永久且可搜尋的個人知識庫。
主要特色
- 多模態筆記:結合轉錄內容與 AI 選取的視頻截圖,生成視覺筆記。
- 以本地為先的隱私保護:資料、索引和設定皆儲存在本地,支援本地 LLM 和嵌入模型。
- 彈性輸入格式:支援 Bilibili、YouTube 及本地視頻格式(mp4、mkv、mov、webm)。
- 代理整合:提供 CLI 和特定「技能」,讓 AI 代理(如 Claude 或 Cursor)可觸發摘要與轉錄。
- 知識管理:具備基於 RAG 的知識庫,支援跨視頻語義檢索與思維導圖生成。
相關
- 專案
- 專案
- 專案
zrt-ai-lab/ViNote一款由 AI 驅動的影片轉知識工具,可將 YouTube、Bilibili 或本機檔案中的影片轉換為結構化筆記、思維導圖與可搜尋的知識資產。
- 專案
wendy7756/AI-Video-TranscriberAI Video Transcriber 是一個基於 FastAPI 的網頁應用程式(支援 CLI/MCP),可從 YouTube、TikTok、Bilibili、播客等平台提取字幕或使用 Whisper 處理,接著利用 OpenAI 兼容的 LLM 清理逐字稿、必要時進行翻譯,並產生多語言摘要。它也能平行下載原始影片,支援 Docker 或簡單安裝腳本,並提供 REST API 供程式化使用。
- 專案
Anil-matcha/AI-Youtube-Shorts-GeneratorAI‑YouTube‑Shorts‑Generator 是一個開源的 Python 工具,可將長 YouTube 影片(或本機檔案)自動轉換為適用於 TikTok/Reels/YouTube Shorts 的垂直短片。它下載影片,使用 Whisper 進行轉錄,利用 LLM(OpenAI、Gemini 或 MuAPI 模型)對『病毒式傳播潛力』高的時刻進行評分,去重重疊候選,並自動將每個高光片段裁剪為 9:16(或任意比例)。提供兩種模式:零設定 API 模式(將下載、轉錄、評分、裁剪委託給 MuAPI)與完全本機模式(執行 `yt‑dlp`、`faster‑whisper`、OpenCV/ffmpeg 並呼叫外部 LLM)。CLI 會返回 MP4 檔案,以及每個剪輯的評分、鈎子語句與理由,還可輸出詳細 JSON 檔案。MIT 授權,適合創作者、代理機構或開發者建構自己的剪輯 SaaS。