快速了解 Evolution 的各种功能
通过本文档,方便你快速了解 Evolution 的观测、评测、优化等功能。
前置准备
- 访问Evolution,点击右上角的登录。
- 使用阿里云账号登录。
- 如尚未注册阿里云账号,先注册并完成登录。
观测
Evolution 为开发者提供全链路执行过程的可视化观测能力,完整记录从输入到输出的每个处理环节,同时支持监控统计、限流统计、配置告警规则。
- 上报&查看 调用链轨迹与模型/工具事件。
- 观察请求数、Tokens、模型、工具调用等监控指标。
- 查看应用 QPM、限流次数等限流指标。
- 基于告警模板配置告警规则,查看告警历史。
评测
Evolution 为开发者提供系统化的评测能力,能够对应用的输出进行评测。可以通过分析实验结果,深入研究异常案例,并进行有针对性的优化。
- 创建和管理评测集,整理输入样本与期望结果。
- 创建或选择评估器,配置规则或模型评分维度。
- 创建评测任务&查看评测结果,批量运行并生成评分,分析得分分布与回归对比。
更多详细说明,参考评测任务。
优化
Evolution 为开发者提供系统化的评测与优化闭环,能够基于调试结果、评测集数据与线上 Trace 反馈,对应用 Prompt 进行智能优化与人工调试。支持多版本效果对比与一键采纳,持续提升应用输出质量。
- 多版本效果对比调试优化应用 Prompt。
- 基于调试结果&反馈优化应用 Prompt。
- 基于优质评测集 & 评测任务结果,优化应用 Prompt。
更多详细说明,参考应用优化。
该文章对您有帮助吗?