NVIDIA/cudf-spark
NVIDIA cuDF for Apache Spark plugin - accelerate Apache Spark with GPUs
解決的問題
透過利用GPU加速Apache Spark處理，減少資料處理任務所需的時間。
工作原理
本專案提供一個插件程式庫，使用cuDF（CUDA DataFrame）程式庫，將Spark處理工作卸載至NVIDIA GPU上。
適用對象
希望透過GPU加速提升資料處理效能的Apache Spark使用者，包括資料工程師與開發者。
主要亮點
- 透過cuDF程式庫實現Apache Spark的GPU加速處理。
- 目標是與標準Apache Spark達成逐位完全相同的結果。
- 提供API，支援零複製資料傳輸至其他GPU支援的應用程式，例如XGBoost等機器學習庫。
- 支援GPU加速的使用者定義函數（UDFs）。
相關
- 專案
- 專案
- 專案
- 專案
- 專案