#49 · 主分类: MLOps与评测
evidently
Evidently 是一个开源的机器学习和LLM可观测性框架。评估、测试和监控任何AI驱动的系统或数据管道。从表格数据到生成式AI,提供100多个指标。
项目最后更新:08/05/26
GitHub Stars
7.9K
Forks数量
904
贡献者数量
97
许可证
Apache-2.0
收录理由
生产环境里跑着ML或LLM系统的团队,常常找不到一个统一的地方回答“模型现在还好吗”。Evidently用一套Python库补上这个缺口:内置100多项指标,覆盖表格数据质量、分布漂移和LLM输出评估,还能把这些检查变成交互式报告、测试套件,或者自托管的监控面板。它的模块化设计很实用——在Notebook里做一次性评估,把同样的检查转成CI/CD里的通过/失败条件,或者把指标流式送入实时界面,都不用重构现有管道。预测和生成式任务都能处理,团队同时维护传统分类器和RAG、聊天应用时,一套工具链就够用。LLM评估部分包括描述符检查、LLM作为裁判、检索相关性,对现在还在人工翻看模型输出、想要可重复流程的人来说,尤其合适。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。
同类热门项目
unsloth
本地UI,用于运行和训练LLM及扩散模型。支持GGUF、MLX、Qwen3.8、Kimi K3、MiniMax-H3、Gemma 4、FLUX等。
LlamaFactory
统一高效微调100+大语言模型与视觉语言模型(ACL 2024)
airflow
Apache Airflow - 一个以编程方式编写、调度和监控工作流的平台
langfuse
🪢 开源AI工程平台:LLM评估、可观测性、指标、提示管理、游乐场、数据集。与OpenTelemetry、LangChain、OpenAI SDK、LiteLLM等集成。🍊YC W23
netron
神经网络、深度学习和机器学习模型的可视化工具