cubefs/cubefs

解決的問題

CubeFS 提供一種可擴展的雲原生分散式儲存解決方案，消除了運算與儲存之間的緊密耦合。這使得資料庫、搜尋系統與 AI/ML 應用能夠獨立擴展其運算能力與儲存容量。

作法原理

它作為一個支援多種存取協定（POSIX、HDFS、S3 與原生 REST API）的分散式檔案與物件儲存系統運作。採用高度可擴展的元資料服務，具備強一致性，並提供彈性儲存策略，包括高效率複製與低成本的錯誤校正編碼。在混合雲架構中，它透過在 S3 等公共雲儲存之上建立多層快取，提供 I/O 加速。

適用對象

專為建構資料湖、資料中心檔案系統或私有/混合雲儲存的開發人員與基礎設施工程師設計，特別適合執行 AI/ML 工作負載或大型容器平台的使用者。

主要特色

• 支援 POSIX、HDFS 與 S3 協定，實現彈性資料存取。
• 支援 AI/ML 與資料庫架構中儲存與運算的分離。
• 具備多租戶功能，提升資源隔離與使用效率。
• 對大檔案與小檔案，以及順序寫入與隨機寫入皆進行最佳化。
• 透過多層快取提供混合雲加速。