NVIDIA/cudf-spark
NVIDIA cuDF for Apache Spark plugin - accelerate Apache Spark with GPUs
解决的问题
通过利用GPU加速Apache Spark处理，减少数据处理任务所需的时间。
工作原理
该项目提供一个插件库，使用cuDF（CUDA DataFrame）库将Spark处理任务卸载到NVIDIA GPU上。
适用人群
希望利用GPU加速提升数据处理性能的Apache Spark用户，包括数据工程师和开发者。
主要亮点
- 通过cuDF库实现Apache Spark的GPU加速处理。
- 旨在与标准Apache Spark实现逐位完全一致的结果。
- 提供API，支持零拷贝数据传输至其他GPU支持的应用程序，例如XGBoost等机器学习库。
- 支持GPU加速的用户自定义函数（UDFs）。
相关
- 项目
- 项目
- 项目
- 项目
- 项目