LangSmith

LangSmith 是帮助了解 AI agent 表现如何的工具。它记录 agent 从首个 input 到最终 answer 的每一步。你可 replay 这些步骤以找出 agent 出错之处。LangSmith 还让你用真实 user prompt 创建 test set，并将新 model version 与之比较。它展示 speed、cost 与 accuracy 的清晰数字以便发现 trade-off。因 LangSmith 链接 LangChain，只需几行额外代码即可接入。web dashboard 提供 chart、error log 与 side-by-side result view，便于跟踪进度、修复 bug 并证明 agent 随时间改进。