Surge AI
Données humaines de qualité pour entraîner et évaluer des modèles
Surge AI fournit le jugement humain qui entre dans les modèles de langage actuels. Les labos ont besoin de personnes pour comparer des réponses, écrire des réponses idéales et noter la qualité, et ces notes entraînent les modèles par des techniques comme le RLHF. Surge recrute et gère des annotateurs avec des compétences spécialisées, comme la programmation, l’écriture et une expertise en science, en droit ou en médecine.
Son argument est la qualité plutôt que le volume de foule. Un filtrage, une formation et des contrôles soignés visent des données plus exactes que ce que livrent les plateformes de foule généralistes. Les services incluent la construction de jeux d’évaluation, des tests adverses pour trouver les faiblesses d’un modèle, et des jeux de données sur mesure pour des tâches précises. L’entreprise travaille avec de grands développeurs d’IA et publie de la recherche sur la qualité des données.
Surge vend aux labos d’IA et aux entreprises par des contrats sur mesure, donc ce n’est pas un outil en libre-service pour les particuliers. Le travail de données humaines pose des questions de rémunération et de conditions des annotateurs, qui varient dans le secteur. Les alternatives incluent Scale AI, Mercor, Snorkel AI, Turing et Labelbox. Surge AI convient aux équipes qui entraînent ou évaluent des modèles de frontière.