#49 · 主分类: MLOps与评测

evidently

data-drift data-quality data-science data-validation generative-ai hacktoberfest html-report jupyter-notebook llm llmops machine-learning mlops model-monitoring pandas-dataframe

Evidently 是一个开源的机器学习和LLM可观测性框架。评估、测试和监控任何AI驱动的系统或数据管道。从表格数据到生成式AI,提供100多个指标。

项目最后更新:08/05/26

GitHub Stars

7.9K

Forks数量

904

贡献者数量

97

许可证

Apache-2.0

收录理由

生产环境里跑着ML或LLM系统的团队,常常找不到一个统一的地方回答“模型现在还好吗”。Evidently用一套Python库补上这个缺口:内置100多项指标,覆盖表格数据质量、分布漂移和LLM输出评估,还能把这些检查变成交互式报告、测试套件,或者自托管的监控面板。它的模块化设计很实用——在Notebook里做一次性评估,把同样的检查转成CI/CD里的通过/失败条件,或者把指标流式送入实时界面,都不用重构现有管道。预测和生成式任务都能处理,团队同时维护传统分类器和RAG、聊天应用时,一套工具链就够用。LLM评估部分包括描述符检查、LLM作为裁判、检索相关性,对现在还在人工翻看模型输出、想要可重复流程的人来说,尤其合适。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目