Evidently AI

LLM应用的开源评估与可观测性

2024-08-20

Evidently AI
Evidently 是一个开源框架,用于评估、测试和监控AI驱动的应用程序。📚 内置100多项检查,从分类到RAG。🚦 支持离线评估和实时监控。🛠 轻松添加自定义指标和LLM评判。
Evidently AI是一个开源框架,专为评估、测试和监控AI驱动的应用程序设计,特别是那些使用大型语言模型(LLMs)的应用。它提供了100多种内置指标,用于分类和检索增强生成(RAG)等任务,支持离线评估和实时监控。用户可以轻松集成自定义指标和基于LLM的评估,使其具有高度适应性。被数千家公司信赖的Evidently帮助检测数据漂移、幻觉和风险输出等问题,确保模型性能稳健。其直观的界面、详细的文档和灵活性使其成为MLOps团队在维护生产环境中AI可靠性和透明性时的首选工具。
Open Source Developer Tools Artificial Intelligence GitHub