🎯 课程主题
全面概览 LangSmith 平台的功能模块，按照"核心应用开发→提示词与调试→部署与沙箱"三大板块介绍各项工具，并指出当前阶段应重点关注的 Tracing 和 Playground 功能。
📝 核心知识点
1. Tracing（追踪）
- 概念说明：LangSmith 最核心功能，记录每次模型交互的完整调用链，包括输入、输出、各步骤耗时和元数据。
- 关键细节：
- 用于排查 Agent 或 RAG 应用中的性能瓶颈和报错问题
- 进入项目后点击具体 Trace 可查看交互的详细参数信息
- 是日常开发中使用频率最高的功能
2. Monitoring（监控）
- 概念说明：提供生产环境的高级数据可视化面板。
- 关键细节：
- 展示模型调用次数、Token 消耗（输入/输出）、工具调用统计等指标
- 用于线上应用的持续监控和成本分析
3. Datasets & Experiments（数据集与实验）
- 概念说明：用于管理测试数据集并进行对比实验。
- 关键细节：后续 RAG 和 Agent 开发阶段会用到，当前暂不涉及
4. Evaluators（评估器）
- 概念说明：配置并自动化评估任务质量，如答案相关性、幻觉检测等，并可自动打分。
- 关键细节：支持自动化评估和得分，适用于批量测试场景
5. Annotation Queues（标注队列）
- 概念说明：数据清洗与标注管理。
- 关键细节：高质量清洗数据便于后期模型微调（Fine-tuning）
6. Prompts（提示词管理）
- 概念说明：提示词版本管理工具，支持编写和管理多个版本的提示词。
- 关键细节：
- 类似 Git 的版本管理，可保存版本一、版本二等
- 在代码中可调用特定版本的提示词进行测试
7. Playground（试验场）
- 概念说明：Web 交互界面，用于直接选择和测试模型、设置提示词并进行实时交互。
- 关键细节：
- 可选择不同模型
- 可设置系统角色、用户角色的提示词
- 适用于提示词的快速调优和效果验证
- 是当前阶段应重点关注的功能之一
8. Studio（工作室）
- 概念说明：通常与 LangGraph 深度集成的工作室环境。
- 关键细节：
- 主要用于 LangGraph 框架下的 Agent 开发和交互
- 后续学习 LangGraph 时会深入接触
9. Context Hub（上下文中心）
- 概念说明：管理全局上下文或通用组件的配置。
10. Deployment（部署）
- 概念说明：将 LangChain 应用或 LangGraph Agent 部署为线上 API 服务。
- 关键细节：提供线上部署能力，使应用可供外部调用
11. Sandbox（沙箱）
- 概念说明：提供轻量级的线上运行和测试环境。
🏗️ 架构与工作流
LangSmith 功能模块全景：
┌──────────────────────────────────────────────────┐
│ 第一板块：核心应用开发 │
│ ┌──────────┬──────────┬──────────┬────────────┐ │
│ │ Tracing │Monitorin│Datasets │Evaluators │ │
│ │ (追踪) │g (监控) │& Exp. │(评估器) │ │
│ │ ★必须掌握 │ │ │ │ │
│ └──────────┴──────────┴──────────┴────────────┘ │
│ ┌──────────────┐ │
│ │ Annotation │ │
│ │ Queues(标注) │ │
│ └──────────────┘ │
├──────────────────────────────────────────────────┤
│ 第二板块：提示词与调试 │
│ ┌──────────┬──────────┬──────────┐ │
│ │ Prompts │Playground│ Studio │ │
│ │ (提示词) │(试验场) │(工作室) │ │
│ │ │ ★重点关注 │ │ │
│ └──────────┴──────────┴──────────┘ │
│ ┌──────────────┐ │
│ │ Context Hub │ │
│ │ (上下文中心) │ │
│ └──────────────┘ │
├──────────────────────────────────────────────────┤
│ 第三板块：部署与沙箱 │
│ ┌──────────┬──────────┐ │
│ │Deployment│ Sandbox │ │
│ │ (部署) │ (沙箱) │ │
│ └──────────┴──────────┘ │
└──────────────────────────────────────────────────┘
当前阶段重点：Tracing（调试追踪）+ Playground（提示词调优）
后续阶段重点：Datasets、Evaluators、Studio（RAG/Agent 开发时）
💻 代码实战
本节课以理论讲解为主，无代码实战。
⚠️ 常见问题与避坑指南
- 左侧功能在英文版界面中显示，对不熟悉英文的用户可能需要适应
- 初学者不要被众多功能模块迷惑，当前阶段只需掌握 Tracing 和 Playground 即可
- 部分功能（如 Datasets、Evaluators、Studio）需要等学到 RAG 和 Agent 开发阶段才会用到
💡 个人总结与延伸
LangSmith 的功能体系可理解为"开发→测试→部署"的全链路工具：Tracing/Monitoring 保障开发质量，Datasets/Evaluators 实现自动化测试，Deployment/Sandbox 完成上线部署。学习 LangChain 的初期聚焦于 Tracing（实时查看调用链调试）和 Playground（快速实验提示词效果），后续随着应用复杂度提升再逐步学习其他模块。建议在实际项目中将 Tracing 作为开发标配，持续追踪每次调用的性能数据。