Observabilite

AgentOps est une plateforme d observabilite pour les agents IA, avec supervision, debogage et evaluation pour aider les developpeurs a optimiser les performances.

Phoenix est un outil open source d observabilite et d evaluation pour les applications LLM et agents, avec tracing en ligne et diagnostic hors ligne.

DeepEval est un framework d evaluation open-source pour les applications LLM.

Ragas est un framework pour evaluer les systemes RAG avec diverses metriques comme la fidelite, la pertinence des reponses et la precision du contexte.

Helicone est une plateforme open source de proxy et d observabilite pour applications LLM, avec tracing des requetes, cache et analyse des couts.

Langfuse est une plateforme open source d observabilite pour applications LLM, avec tracing, evaluation, versioning des prompts et analyse des couts.

TruLens est un outil open-source pour evaluer et suivre les applications LLM.