ICIJ/datashare
A self‑hosted search engine for documents
解決的問題
Datashare 為記者與研究人員提供了一種安全、自托管的方式,用於搜尋與分析大量異質資料。在處理敏感的洩密文件時,無需依賴外部雲端服務,使用者可完全掌控其資料,同時對各種檔案格式執行複雜搜尋。
作法原理
此平台可接收多種檔案格式(包括 PDF、電子郵件、試算表與影像),對掃描件使用 OCR 提取文字,並透過元資料與命名實體萃取來增強資料。這些資訊使用 Elasticsearch 進行索引,並儲存在 PostgreSQL 中,透過 REST API 與專用搜尋使用者介面公開結果。
適用對象
專為需要安全處理與查詢大規模文件洩密或檔案庫的調查記者、新聞單位與研究人員設計。
主要特色
- 多格式支援:支援索引 PDF、電子郵件、辦公文件、影像與歸檔檔案。
- 自動增強:自動偵測人物、組織與地點等命名實體。
- 整合 OCR:將掃描件與影像中的視覺文字轉換為可搜尋的文字。
- 進階查詢:支援布林、萬用字元與模糊查詢,並可結合分面過濾器使用。
- 協作工具:包含團隊/伺服器模式,支援共享標籤與推薦。
相關
- 專案
- 專案
- 專案
- 專案
- 專案