华为：2026智能体开发平台 AgentArts 智能体运营运维报告（189页）.pdf

1、智能体开发平台智能体开发平台 AgentArts智能体运营运维智能体运营运维文档版本文档版本01发布日期发布日期2026-05-11华为云计算技术有限公司华为云计算技术有限公司 版权所有版权所有 华为云计算技术有限公司华为云计算技术有限公司 2026。保留一切权利。保留一切权利。非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传播。商标声明商标声明和其他华为商标均为华为技术有限公司的商标。本文档提及的其他所有商标或注册商标，由各自的所有人拥有。注意注意您购买的产品、服务或特性等应受华为云计算技术有限公司商业合同和条款的约束，本文档中描述的全部或部分产

2、品、服务或特性可能不在您的购买或使用范围之内。除非合同另有约定，华为云计算技术有限公司对本文档内容不做任何明示或暗示的声明或保证。由于产品版本升级或其他原因，本文档内容会不定期进行更新。除非另有约定，本文档仅作为使用指导，本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。华为云计算技术有限公司华为云计算技术有限公司地址：贵州省贵安新区黔中大道交兴功路华为云数据中心 邮编：550029网址：https:/ 01(2026-05-11)版权所有 华为云计算技术有限公司i目目 录录1 智能体观测智能体观测.11.1 观测介绍.11.2 数据上报.61.2.1 数据上报概述.61.2.2 上报

3、 AgentArts 中的智能体数据.81.2.3 上报高代码智能体数据.121.3 查看应用指标信息.171.3.1 查看业务指标信息.171.3.2 查看运营指标信息.201.4 查看应用调用链信息.231.5 查看会话分析信息.291.6 查看高代码应用运行数据.311.6.1 查看高代码智能体运行时数据信息.311.6.2 查看沙箱工具数据信息.331.6.3 查看网关数据信息.341.7 人工标注 Trace 数据.361.8 数据回流.401.8.1 Trace 数据回流.402 智能体评估智能体评估.462.1 评估介绍.462.2 示例：快速完成一次智能体评估.492.3 示例

4、：基于离线任务进行评估.572.4 评测集.682.4.1 人工创建单轮评测集.682.4.2 人工创建多轮评测集.732.4.3 AI 合成评测集.762.4.4 回流 Trace 数据至评测集.842.4.5 回流评估结果至评测集.882.4.6 维护评测集.932.5 评估器.952.5.1 评估器介绍.952.5.2 创建模型评估器.972.5.3 维护评估器.100智能体开发平台 AgentArts智能体运营运维目 录文档版本 01(2026-05-11)版权所有 华为云计算技术有限公司ii2.5.4 预置评估器.1012.5.4.1 预置评估器概览.1012.5.4.2 预置评估器

5、.1022.5.4.2.1 正确性.1032.5.4.2.2 AI 味检查.1042.5.4.2.3 任务完成度.1052.5.4.2.4 轨迹质量.1062.5.4.2.5 不敏感性.1092.5.4.2.6 争议性.1102.5.4.2.7 创意性.1112.5.4.2.8 参考答案遵从度.1122.5.4.2.9 工具参数正确性.1142.5.4.2.10 工具选择质量.1162.5.4.2.11 幻觉现象.1172.5.4.2.12 性别歧视.1182.5.4.2.13 恶意性.1192.5.4.2.14 指令遵从度.1212.5.4.2.15 拒答检测.1222.5.4.2.16 格

6、式检查.1232.5.4.2.17 语种一致性.1242.5.4.2.18 文本可用性.1252.5.4.2.19 安全风险漏放.1272.5.4.2.20 有害性.1282.5.4.2.21 有用性.1292.5.4.2.22 深度性.1312.5.4.2.23 犯罪性.1322.5.4.2.24 引用相关性.1332.5.4.2.25 知识问答-指令遵循.1352.5.4.2.26 知识问答-真实准确.1362.5.4.2.27 知识问答-精炼性.1372.5.4.2.28 知识问答-便捷性.1382.5.4.2.29 知识问答-丰富度.1402.5.4.2.30 简洁性.1412.5.4