LangSmith 支持根据反馈分数和元数据过滤之前运行的实验,帮助你轻松找到真正关注的实验。

背景:为实验添加元数据

在 SDK 中运行实验时,你可以附加元数据,以便更轻松地在界面中进行过滤。如果你在运行实验时已经确定了想要深入分析的维度,这会非常有帮助。 在本例中,我们将围绕所使用的模型、模型提供商以及提示词的已知 ID,为实验添加元数据:

在界面中过滤实验

默认情况下,我们可以在界面中看到所有已运行的实验。 过滤所有实验 例如,如果我们更偏好 OpenAI 模型,就可以轻松进行筛选,首先只查看 OpenAI 模型中的分数: 过滤 OpenAI 模型 我们还可以叠加多个过滤条件,排除正确性分数较低的实验,从而确保只比较相关实验: 过滤反馈 最后,我们可以清除并重置过滤条件。例如,如果发现使用 singleminded 提示词时有一个明显的优胜者,就可以更改过滤设置,查看其他模型提供商的模型是否也能同样出色地配合该提示词使用: 过滤 singleminded