#42 · 主分类： AI数据基础设施与存储
ffcv
FFCV：快速推进计算机视觉（以及其他机器学习工作负载！）
项目最后更新：06/16/24
GitHub Stars
3.0K
Forks数量
180
贡献者数量
31
许可证
Apache-2.0
收录理由
在视觉模型训练中，数据加载常常成为拖慢整体进度的瓶颈——GPU 往往要空转等待图像从磁盘解码。FFCV 通过将数据集转换为自定义二进制格式，并借助高度优化的 PyTorch 加载器来供给数据，从而让 GPU 保持忙碌。实际效果相当显著：在单张 GPU 上，ImageNet 规模的训练可在约半小时内完成，基准测试的成本也随之大幅下降。由于训练循环本身无需改动，只需替换加载器，对于已经使用 PyTorch 的团队来说，接入过程较为顺畅。如果你经常反复训练大型视觉数据集，节省下来的迭代时间会积累成可观的收益。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容，欢迎 联系我们推荐选题或投稿。
同类热门项目
ClickHouse
ClickHouse® 是一个实时分析数据库管理系统
simdjson
每秒解析数GB的JSON：被Facebook/Meta Velox、Node.js运行时、ClickHouse、WatermelonDB、Apache Doris、Milvus、StarRocks使用
gun
开源网络安全协议，用于同步去中心化图数据。
emqx
为AI、IoT、IIoT和联网车辆提供最可扩展且可靠的MQTT broker
server
MariaDB服务器是MySQL服务器的社区开发分支。由原MySQL团队核心成员发起，MariaDB积极与外部开发者合作，提供业界功能最丰富、稳定且许可合理的开源SQL服务器。