2048
コンテキストトークン
7B
パラメータ
BAAI License
ライセンス
2023
発売
Aquilaは、北京智源人工知能研究院(BAAI)が初めて公開したバイリンガルの言語モデルです。2023年に、中国語と英語のテキストで学習した70億パラメータのベースモデルとしてリリースされました。BAAIはGPT型のアーキテクチャで作り、英語中心のモデルから借りたトークナイザーより、中国語のテキストを効率よく扱えるよう独自のトークナイザーを設計しました。コンテキスト長は2,048トークンです。リリースには、事前学習済みのベースモデルに加え、指示チューニングしたAquilaChatと、コード向けのAquilaCodeが含まれています。
BAAIは重みを独自のAquilaライセンスで公開しました。いくつかの条件のもとで商用利用を認めるライセンスです。モデルはHugging Faceと自前のModelHubで入手できます。Aquilaは、LLaMAなど欧米のモデルに代わる選択肢を国内の開発者に提供する狙いで、2023年に相次いだ中国のオープンウェイトモデルの1つでした。その後、BAAI自身のラインナップでは、より大きくコンテキスト長の長いAquila2ファミリーに置き換えられています。