#61 · 主分类: 深度学习框架

SynapseML

ai apache-spark azure big-data cognitive-services data-science databricks deep-learning http lightgbm machine-learning microsoft ml model-deployment onnx opencv pyspark scala spark synapse

简单分布式机器学习Python库,为Spark移植ML算法

项目最后更新:08/28/26

GitHub Stars

5.2K

Forks数量

868

贡献者数量

133

许可证

MIT

收录理由

对于已经深度使用 Apache Spark 的团队,SynapseML 提供了一种极为顺手的扩展方式:它把与 SparkML 兼容的估计器和转换器直接构建在 Spark 运行时之上,无需另起一套独立的计算框架,学习成本低,迁移也平滑。同一套 API 既能跑在单机笔记本上,也能跑在按需伸缩的集群上,资源利用率很高。库内封装了 LightGBM、ONNX 推理、OpenCV 以及微软认知服务,因此一个管道就能把表格建模和文本、视觉、异常检测等环节串在一起,处理混合任务时不必拼凑多个工具。而且它支持 Python、R、Scala、Java 和 .NET,团队成员可以用各自熟悉的语言参与开发,协作门槛更低。如果组织已经以 Spark 为统一技术底座,又希望训练和推理留在同一份代码里,这个库值得认真评估。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目