AgentOps

Phoenixはオンライントレーシングとオフライン診断をサポートするLLMおよびエージェントアプリケーション向けのオープンソース観測・評価ツールです。

Heliconeはリクエストトレーシング、キャッシング、コスト分析を提供するLLMアプリケーション向けのオープンソースプロキシ・観測プラットフォームです。

Langfuseはトレーシング、評価、プロンプトバージョニング、コスト分析をサポートするオープンソースLLM観測プラットフォームです。

TruLensは、LLMアプリを評価および追跡するためのオープンソースツールです。