DeepSeek Coder V2

DeepSeek-Coder-V2はDeepSeekの第2世代のコードモデルで、2024年6月に公開されました。Mixture-of-Expertsモデルで、総パラメータ数は2360億、1トークンあたりの有効パラメータ数は210億です。コンテキスト長は初代DeepSeek-Coderの16,000トークンから128,000トークンへと大きく延び、対応するプログラミング言語も86から338に増えました。HumanEvalでは90.2%を記録し、DeepSeekは当時、コーディングタスクでGPT-4 Turboのようなクローズドモデルとの差を縮めたと説明しました。前作と比べて、一般的な推論や数学のベンチマークも向上しています。初代DeepSeek-Coderのより厳しいライセンスとは違い、DeepSeek-Coder-V2はMITライセンスで公開されており、商用プロジェクトでも自由に使えます。重みはHugging Faceにあり、DeepSeek自身のプラットフォームからAPIでも使えます。