AI数据基础设施与存储

面向AI训练与推理高吞吐场景的开源存储引擎、数据编织层及基础设施,覆盖检查点保存、数据加载与KV缓存等关键环节。

共 42 个项目

排名逻辑见 方法论 ;同类排名基于 GitHub 公开指标。

第 41–42 项,共 42 个

排名 项目 Stars Forks
41 petastorm

Petastorm库支持从Apache Parquet格式的数据集中进行单机或分布式深度学习模型的训练和评估。它支持Tensorflow、Pytorch和PySpark等ML框架,并可从纯Python代码中使用。

1.9K 286
42 ffcv

FFCV:快速推进计算机视觉(以及其他机器学习工作负载!)

3.0K 180
< 上一页
/ 3
下一页 >