主题
内联标注追踪和运行
LangSmith 允许你在应用内手动为追踪标注反馈。这对于向追踪添加上下文(例如用户的评论或关于某个具体问题的备注)很有用。 你可以内联标注追踪,也可以通过将追踪发送到标注队列来标注,后者允许你一次一个地仔细检查并记录运行的反馈。 反馈标签与你的工作区相关联。
NOTE
你可以将用户反馈附加到追踪的任意中间运行(跨度)上,而不仅仅是根跨度。
这对于对 LLM 应用的特定部分(例如 RAG 流水线的检索步骤或生成步骤)进行评价很有用。
要内联标注追踪,请在追踪视图中打开某个属于该追踪的特定运行的三点菜单(...),然后点击备注。
这会打开一个窗格,让你从与工作区关联的反馈标签中进行选择,并为特定标签添加得分。你还可以添加独立评论。请按照设置反馈标准为你的工作区设置反馈标签。 你也可以在该窗格内直接设置新的反馈标准。
LangSmith UI 中的内联反馈和备注不会更改追踪的保留层级;除非有另一个操作显式延长保留期,否则追踪会保持为其项目配置的保留期。

你可以使用已标注的键盘快捷键来简化标注流程。