MLflow
活跃简介
MLflow 是开源 AI 工程平台,为 Agent 和 LLM 应用提供调试、评估、监控和优化能力,支持模型与数据访问管理。
MLflow 是开源 AI 工程平台,为 Agent 和 LLM 应用提供调试、评估、监控和优化能力,支持模型与数据访问管理。
Agenta 是一个开源 LLMOps 平台,提供 Prompt Playground、Prompt 管理、LLM 评估和可观测性的一站式解决方案。
OpenTelemetry instrumentation for AI observability, providing standardized tracing, metrics collection, and span definitions for LLM inference processes to help developers monitor and debug AI agent systems.
Evidently 是一个开源 ML 和 LLM 可观测性框架,提供 100+ 评估指标,用于测试、监控和评估 AI 驱动的系统。
LangSmith SDK 是 LangChain 团队提供的 LLM 应用与 Agent 可观测性工具链,支持 tracing、评测、数据集管理与调试,适合对生产级 Agent 工作流进行分析和优化。