GPT中文GPT中文论坛社区AI工具软件大全 GPT.CC Claude Fable 5 · GPT-5.6 直连,不用连国际网 去看看 →
AI工具软件大全
首页 / Skill 技能 / 智能体评估与性能优化

智能体评估与性能优化agents-optimizeAWS官方放心用

给 AgentCore 智能体加评估、监控和可观测,持续把关回答质量与成本。

作者:AWS 仓库 aws/agent-toolkit-for-aws ★ 2,094 核对于 2026-07-24
01

智能体评估与性能优化 是干什么的

这个技能在你想评估或优化 AgentCore 智能体时自动触发。它会先检查 CLI 版本(需 ≥0.9.0),读取 `agentcore/agentcore.json` 了解现有配置,再根据你的意图加载对应的参考文档:`references/evals.md` 负责添加评估器、跑评估、设置 CI/CD 质量门禁和在线监控;`references/observability.md` 负责 CloudWatch 看板、X-Ray 链路、日志指标;`references/cost.md` 负责成本与延迟分析。它能指导你配置 LLM-as-judge、代码评估器、采样率、通过/失败阈值等,但不处理具体报错或崩溃。

适合在智能体上线后想了解回答质量、搭建持续监控、给流水线加质量门,或排查慢和贵的问题时使用。前提是已有 AgentCore 项目且 CLI 版本达标。注意评估与 Trace 数据大约存在 10 秒端到端延迟;生产环境在线评估采样率不建议直接开到 100%,否则成本会飙升。如果是路由出错或功能 broken,请用 `agents-debug`,安全加固请用 `agents-harden`。

添加质量评估器配置 CI/CD 质量门禁搭建 CloudWatch 监控看板分析延迟与调用成本
02

怎么装 — 一行命令

在下面找到你用的工具,复制命令粘进终端就装好了:

其他兼容 Agent
npx skills add aws/agent-toolkit-for-aws
通用安装器,列表里选 agents-optimize
03

装完第一句话怎么说

装好后不用任何配置,直接在对话里说:

给我的 AgentCore 项目加一个 LLM 评判的质量评估器,并跑一遍离线评估。

AI 检测到任务匹配时会自动加载这个 Skill,不需要手动开关。

04

安全体检 — 放心用

官方或可信来源出品,无危险脚本,按说明用即可。
装进来的是这些文件:
SKILL.mdreferences/
想装前先看一眼?去仓库读源码 →
05

配这些工具用

06

常见问题

用这个技能前需要满足什么条件?

需要安装 AgentCore CLI v0.9.0 或更高版本,并且项目里已有 `agentcore/agentcore.json`,否则它会先让你去创建项目。

它和 `agents-debug` 有什么区别?

`agents-optimize` 管的是质量、性能、成本和可观测;如果智能体已经报错、崩溃或输出完全错误,应该换 `agents-debug` 做根因排查。

生产环境跑在线评估要注意什么坑?

不要把采样率直接设为 100%,否则调用量和成本会很高。另外评估数据从写入到可查询大约有 10 秒端到端延迟。

回 Skill 技能市集,或看 Claude Code 档案 了解宿主工具。