LangSmith

LangSmith aide les équipes à comprendre et à améliorer des applications d’IA. Les développeurs envoient des traces depuis leurs applications, et LangSmith montre chaque étape : prompts, documents récupérés, appels d’outils et sorties du modèle, avec le temps et le coût. Ça permet de trouver où un agent s’est trompé.

L’évaluation est le deuxième pilier. Les équipes construisent des jeux de données à partir du trafic réel, lancent des expériences entre versions de prompts ou de modèles, et notent les résultats avec des évaluateurs automatiques ou une relecture humaine. Des tableaux de bord de suivi et des alertes suivent la qualité en production, et un produit de déploiement héberge des agents construits avec LangGraph.

LangSmith a une offre gratuite et des offres payantes, avec de l’auto-hébergement pour les entreprises. Il s’intègre le plus naturellement aux outils LangChain, mais fonctionne avec d’autres frameworks. Les alternatives incluent Langfuse, Braintrust, Arize Phoenix, Helicone et Weights & Biases Weave. LangSmith convient aux équipes qui construisent des agents avec LangChain et LangGraph.