LangSmith

LangSmith ayuda a los equipos a entender y mejorar las aplicaciones de IA. Los desarrolladores envían trazas desde sus aplicaciones y LangSmith muestra cada paso: prompts, documentos recuperados, llamadas a herramientas y respuestas del modelo, con tiempos y costes. Así se puede encontrar el punto en que un agente se equivocó.

La evaluación es el segundo pilar. Los equipos crean conjuntos de datos a partir del tráfico real, ejecutan experimentos con distintas versiones de prompts o modelos y puntúan los resultados con evaluadores automáticos o revisión humana. Los paneles de monitorización y las alertas siguen la calidad en producción, y un producto de despliegue aloja agentes creados con LangGraph.

LangSmith tiene un nivel gratuito y planes de pago, con alojamiento propio para empresas. Se integra con mayor fluidez con las herramientas de LangChain, pero funciona con otros frameworks. Entre las alternativas están Langfuse, Braintrust, Arize Phoenix, Helicone y Weights & Biases Weave. LangSmith sirve a equipos que construyen agentes con LangChain y LangGraph.