AI 导航
01LangSmith 是什么
LangSmith 解决的是「模型输出不对劲，但不知道哪一步错了」：它把一次问答里的每次模型调用、检索、工具使用都记录下来，能看到完整链路。
还带数据集和评估功能——把线上真实问题存成测试集，改提示词后跑一遍看变好还是变坏，不用靠感觉。
短板是绑定。虽然能独立用，但和 LangChain 生态贴得最紧；国内访问一般，数据出境的合规也要考虑。
02LangSmith 能做什么
链路追踪
看到每一步。
评估数据集
回归测试。
提示词版本
对比效果。
监控告警
线上异常。
标注
人工打分。
03怎么开始用 LangSmith
- 先接追踪改动最小。
- 攒一批真实问题当测试集。
- 改提示词前后各跑一次看指标。
- 线上监控只盯关键指标别什么都告警。
04接上追踪只要两行
环境变量一设，调用就自动上报。
export LANGCHAIN_TRACING_V2=true export LANGCHAIN_API_KEY=lsv2_xxx
接完先跑一次真实请求，看链路里的检索和生成分别是哪一步慢。评估用真实问题攒数据集，别自己编题。
05好在哪，差在哪
链路看得清
定位问题快。
评估能落地
改完知道好坏。
和 LangChain 无缝
接起来简单。
用得上
- 调试 LLM 应用
- 提示词回归测试
- 线上链路监控
- 团队共享调试记录
别指望
- 数据不能出境
- 不用 LangChain
- 个人零成本
- 替代日志系统
06价格和套餐
| 版本 | 价格 | 说明 |
|---|---|---|
| 免费档 | 免费 | 每月少量追踪量。 |
| Plus | 按席位 | 追踪量和评估。 |
| 企业版 | 面议 | 私有化和合规。 |
免费额度够开发用，生产环境按追踪量付费。数据出境的合规要提前确认。
07谁适合用
RAG 调优
看检索哪步错。
提示词迭代
评估对比。
线上监控
异常发现。
团队协作
共享调试记录。
08官网入口
官方入口 smith.langchain.com，国内访问一般。涉及用户数据时先评估合规要求。
09同类工具
10常见问题
LangSmith 是什么？
LLM 应用的可观测和评估平台，能看链路、跑数据集测试。
和 Langfuse 怎么选？
用 LangChain 生态选 LangSmith，要开源自建选 Langfuse。
怎么收费？
有免费额度，生产按追踪量付费。
必须用 LangChain 吗？
不必须，但绑定它体验最好。