AgentList
首页项目文章关于
探索项目
首页项目文章关于
探索项目
首页 / 项目 / RouteLLM

RouteLLM

不活跃
GitHub Python Apache-2.0

简介

RouteLLM 是一个用于 LLM 路由服务的评估框架,通过智能请求路由在降低推理成本的同时保持输出质量,支持多种路由策略的对比评测。

标签

llm-routing cost-optimization evaluation model-serving

分类

📊 可观测性 ⚡ Agent 工具
访问 GitHub 访问官网 查看文档

项目指标

Stars 4.8k
Forks 369
Watchers 4.8k
Issues 38
创建时间 2024年6月3日
最近提交 2024年8月10日

部署方式

本地部署

相关项目

AgentLabs

546 · TypeScript
不活跃

AgentLabs 是一个面向 Agent 开发与测试的工具集合,强调实验、回放和开发流程辅助,适合帮助团队提升 Agent 迭代效率。

testingdeveloper-toolsevaluation +1

DeepEval

14.8k · Python
活跃

DeepEval 是一个用于 LLM 应用的开源评估框架。提供丰富的评估指标和工具,支持单元测试、集成测试,帮助开发者构建可靠的 LLM 应用。

llmevaluationtesting +1

Harbor

1.5k · Python
活跃

Agent 评估框架,支持运行 Agent 基准测试和创建强化学习环境,用于衡量和改进 Agent 性能

evaluationbenchmarkrl-environments +2

Plano

6.3k · Rust
活跃

AI 原生代理和数据平面,内置编排、安全防护、可观测性和智能 LLM 路由功能,帮助开发者专注于 Agent 核心逻辑,简化 LLM 应用的生产部署。

llm-gatewayllm-routingobservability +2
AgentList

开源机器人/Agent 项目导航站

快速链接

  • 项目列表
  • 精选文章
  • 分类浏览

联系我们

  • 关于我们
  • 隐私政策
  • 联系我们

© 2026 AgentList. 保留所有权利。

Made with for the open source community