楽天グループ株式会社は、日本語向けに最適化された高性能言語モデル「Rakuten AI 7B」とその関連モデルを発表しました。
このモデルはフランスのAIスタートアップ、Mistral AI社のオープンモデルをベースに、70億パラメータで構築されており、膨大な日本語・英語データを学習しています。
特に、「Rakuten AI 7B Chat」と呼ばれるチャット専用モデルは、会話データを用いて更なるチューニングを施されております。
また、このモデルはApache 2.0ライセンスで公開されており、楽天のHugging Faceリポジトリからダウンロード可能です。
高品質な事前学習と最適化された形態素解析器の使用によって、日本語テキスト処理の効率が大幅にアップしており、オープンな日本語モデルとして高い評価を受けています。
出典 : 楽天、日本語に最適化したオープンかつ高性能なLLMを公開 | 楽天グループ株式会社 https://corp.rakuten.co.jp/news/press/2024/0321_01.html