MiniCPM

MiniCPMは24億パラメータの言語モデルで、70億・130億モデルでは重いスマートフォンやエッジ端末向けにOpenBMBが2024年2月に公開しました。一般ベンチマークでMistral 7Bに近く、中国語理解、数学、コードなどではLlama 2 13BやFalcon 40Bを上回ると報告されています。長文脈版MiniCPM-2B-128kは文書用途向けに12万8,000トークンに対応します。

Apache 2.0のオープンウェイトでHugging Faceから提供されます。メモリや計算資源が限られたオフライン・低コストアプリの開発者向けです。後のMiniCPM-Vマルチモーダルモデルの基盤となり、規模拡大に頼らない端末内AIという研究所の方針を示しました。