LangChain Blog
·
LangSmith SDK v0.2 使评估更简单
内容提要
LangSmith SDK v0.2发布，优化了开发者体验，简化了evaluate()方法，支持本地评估，提升性能，并扩展文档。Python SDK有两大变化，简化了自定义评估器的使用，支持直接传入langgraph和langchain对象。
关键要点
-
LangSmith SDK v0.2发布，优化了开发者体验。
-
evaluate()方法简化，支持本地评估，提升性能。
-
Python SDK有两大变化，简化了自定义评估器的使用。
-
支持直接传入langgraph和langchain对象进行评估。
-
评估器函数现在接受inputs、outputs和reference_outputs字典作为参数。
-
v0.2版本只需了解evaluate()方法，简化了评估流程。
-
新增本地评估功能，允许不上传结果进行测试。
-
Python SDK性能提升，评估速度提高约30%。
-
文档进行了重写，更新了评估相关指南和API参考。
-
Python SDK中有两个重大变更。
延伸解读
本地评估功能的实用性
LangSmith SDK v0.2新增的本地评估功能允许开发者在不上传结果的情况下进行测试。这对于快速迭代和验证代码非常有用，尤其是在调试阶段，可以避免不必要的记录和数据上传。需要注意的是，该功能仍处于测试阶段，仅支持Python SDK。
评估器的简化使用
新版本中，评估器的定义方式得到了简化，开发者可以直接使用输入和输出字典作为参数。这种变化降低了使用门槛，使得自定义评估器的创建更加直观，适合不同水平的开发者使用。
性能提升的影响
Python SDK在v0.2版本中实现了约30%的性能提升，尤其是在处理较大示例时。这意味着开发者在进行评估时可以获得更快的反馈，提升整体开发效率，尤其是在需要频繁测试的场景中。
延伸问答
LangSmith SDK v0.2有哪些主要改进？
LangSmith SDK v0.2优化了开发者体验，简化了evaluate()方法，支持本地评估，提升了性能，并扩展了文档。
如何在LangSmith SDK v0.2中使用自定义评估器？
在v0.2中，自定义评估器可以接受inputs、outputs和reference_outputs字典作为参数，简化了使用方式。
LangSmith SDK v0.2的本地评估功能有什么用？
本地评估功能允许开发者在不上传结果的情况下进行测试，适合快速迭代和验证函数定义。
Python SDK在v0.2版本中性能提升了多少？
Python SDK的评估性能提升约30%，特别是在处理1到4MB的大型示例时。
LangSmith SDK v0.2中如何直接评估langgraph和langchain对象？
可以直接将langgraph和langchain对象传入evaluate()方法进行评估，简化了评估流程。
LangSmith SDK v0.2的文档更新了哪些内容？
文档进行了重写，更新了评估相关指南和API参考，增加了与新功能相关的内容。
