#44 · 主分类: MLOps与评测

mage-ai

artificial-intelligence data data-engineering data-integration data-pipelines data-science dbt elt etl machine-learning orchestration pipeline pipelines python reverse-etl spark sql transformation

🧙 构建、运行和管理数据管道,用于整合和转换数据。

项目最后更新:08/13/26

GitHub Stars

8.8K

Forks数量

991

贡献者数量

162

许可证

Apache-2.0

收录理由

做机器学习的团队常常发现,真正花在模型训练上的时间还没数据准备多。Mage 把这件事变得直观:它的笔记本式界面里,每个代码块都是实际的文件,你可以加载和清洗数据、一步步做转换,每一步的结果都看得见,最后把整个流程串成定时运行的管道。支持 Python、SQL 和 PySpark,还自带连接数据库、API 和云存储的现成组件,不用为环境配置折腾半天。本地用 Docker 或 pip 就能跑起来,不需要云账号,对小团队来说是个低门槛的可视化 ETL 工作台,也犯不着为此绑定某个托管平台。如果你已经在用 Airflow 或 Prefect 做调度,Mage 也可以只承担转换那部分活,不干扰你现有的编排系统。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目