Surge AIは、現代の言語モデルに必要な人間の判断を供給します。ラボには、回答を比べる人、理想的な回答を書く人、品質を採点する人が必要で、こうした評価がRLHFなどの手法でモデルを訓練します。Surgeは、プログラミングや文章、科学、法律、医学の専門知識など、特殊なスキルを持つアノテーターを採用して管理しています。
売りは、クラウドの人数ではなく品質です。丁寧な選考、トレーニング、品質チェックによって、一般的なクラウドのプラットフォームより正確なデータを目指しています。サービスには、評価セットの作成、モデルの弱点を探す敵対的テスト、特定のタスク向けのカスタムデータセットが含まれます。大手のAI開発企業と取引があり、データ品質に関する研究も公開しています。
Surgeは個別契約でAIラボや企業に販売しているので、個人が自分で使い始めるツールではありません。人間のデータ作業には、アノテーターの報酬や労働条件という問題があり、業界内でも状況はまちまちです。代替にはScale AI、Mercor、Snorkel AI、Turing、Labelboxがあります。Surge AIは、最先端のモデルを訓練または評価するチームに向いています。