Agenta — 开源 LLMOps 平台，用于提示词测试与版本管理

central · 2026-03-20 11:00:22 · 4 次点击 · 0 条评论

Agenta 是什么？

Agenta 是一个用于构建生产级 LLM 应用的平台。它通过集成的提示词管理、评估和可观测性，帮助工程和产品团队更快地创建可靠的 LLM 应用。

核心功能

🧪 提示词管理与提示工程

与领域专家（SMEs）协作进行提示工程，并确保生产环境中的稳定性。

交互式 LLM 游乐场：并排对比不同提示词在测试用例上的效果
多模型支持：支持 50+ LLM 模型进行实验，或使用自有模型
版本控制：通过分支和环境管理提示词与配置的版本
复杂配置：支持领域专家协作处理超越简单提示词的复杂配置模式

探索提示词管理 →

📊 LLM 评估

通过人工和自动化反馈，系统地评估您的 LLM 应用。
- 灵活的测试集：从生产数据、游乐场实验或上传的 CSV 文件创建测试用例
- 预构建与自定义评估器：使用 LLM-as-judge、20+ 预构建评估器之一，或您自定义的评估器
- UI 与 API 访问：通过 UI（供领域专家使用）或编程方式（供工程师使用）运行评估
- 人工反馈集成：收集并整合专家标注

探索评估框架 →

📡 LLM 可观测性

在生产环境中洞察您的 LLM 应用。
- 成本与性能追踪：监控开销、延迟和使用模式
- LLM 链路追踪：通过详细的链路追踪调试复杂工作流
- 开放标准：原生支持 OpenTelemetry 追踪，兼容 OpenLLMetry 和 OpenInference
- 集成：提供与大多数模型和框架的预构建集成

了解可观测性 →

📸 截图

Playground
Prompt Management
Evaluation
Observability

🚀 快速开始

Agenta 云平台（推荐）：

最简单的方式是通过 Agenta 云平台开始。提供免费套餐，无需信用卡。

自托管 Agenta

克隆 Agenta：
bash git clone https://github.com/Agenta-AI/agenta && cd agenta
复制配置文件：

在启动服务之前，从示例创建环境文件：

bash cp hosting/docker-compose/oss/env.oss.gh.example hosting/docker-compose/oss/.env.oss.gh
启动 Agenta 服务：
bash docker compose -f hosting/docker-compose/oss/docker-compose.gh.yml --env-file hosting/docker-compose/oss/.env.oss.gh --profile with-web --profile with-traefik up -d
在 http://localhost 访问 Agenta。