Surge AI
Datos humanos de alta calidad para entrenar y evaluar modelos
Surge AI aporta el criterio humano que interviene en los modelos de lenguaje actuales. Los laboratorios necesitan personas que comparen respuestas, escriban respuestas ideales y puntúen la calidad, y esas valoraciones entrenan los modelos con técnicas como RLHF. Surge recluta y gestiona anotadores con habilidades especializadas, como programación, escritura y conocimientos de ciencia, derecho o medicina.
Su propuesta es calidad frente a volumen de crowd. Una selección cuidadosa, la formación y los controles de calidad buscan producir datos más precisos que los de las plataformas de crowd generalistas. Los servicios incluyen crear conjuntos de evaluación, pruebas adversariales para encontrar debilidades de los modelos y conjuntos de datos a medida para tareas concretas. La empresa trabaja con grandes desarrolladores de IA y publica investigación sobre la calidad de los datos.
Surge vende a laboratorios de IA y empresas con contratos a medida, así que no es una herramienta de autoservicio para particulares. El trabajo con datos humanos plantea dudas sobre el pago y las condiciones de los anotadores, que varían en todo el sector. Entre las alternativas están Scale AI, Mercor, Snorkel AI, Turing y Labelbox. Surge AI sirve a equipos que entrenan o evalúan modelos de frontera.