当在线评估器在追踪中的任何运行上执行时,该追踪将自动升级为扩展数据保留。此升级会影响追踪定价,但能确保符合您评估标准(通常是那些对分析最有价值的)的追踪得以保留以便调查。
查看在线评估器
前往 追踪项目 标签页并选择一个追踪项目。要查看该项目现有的在线评估器,请点击 评估器 标签页。配置复合在线评估器
您可以在追踪项目上创建复合评估器,用于在线评估。通过界面中的复合评估器,您可以计算多个评估器分数的加权平均值或加权总和,并支持配置权重。1. 导航到追踪项目
要开始配置复合评估器,请导航到 追踪 页面并选择一个追踪项目。 在追踪项目视图中,导航到 评估器 标签页。点击 + 评估器 打开 添加评估器 面板。在 从头创建 下点击 复合分数。2. 配置复合评估器
- 为您的评估器命名。
- 选择一种聚合方法,可以是 平均值 或 总和。
- 平均值:∑(权重 * 分数) / ∑(权重)。
- 总和:∑(权重 * 分数)。
- 添加您希望纳入复合分数的反馈键。
- 为反馈键添加权重。默认情况下,每个反馈键的权重相等。调整权重可以增加或减少特定反馈键在最终分数中的重要性。
- 点击 创建 保存评估器。
3. 查看复合评估器结果
复合分数作为 反馈 附加到运行上,与单个评估器的反馈类似。 在追踪项目中: 如果组成复合评估的任何单个评估器未在该运行上配置,则不会为该运行计算复合分数。
Connect these docs to Claude, VSCode, and more via MCP for real-time answers.

