楽天グループが2024年12月に、日本語に特化した新しいAIモデル「Rakuten AI 2.0」とその小型版「Rakuten AI 2.0 mini」を発表しました。
これらは2025年春に公開される予定です。Rakuten AI 2.0は、70億パラメーターを持つ8つのサブモデルで構成され、
効率的な処理が期待される混合エキスパートアーキテクチャーを採用。
この新技術により、計算量は大幅に抑えられる一方で、以前のモデルよりも性能が向上しています。
一方、Rakuten AI 2.0 miniはモバイル端末に適したコンパクトな設計で、
エッジコンピューティングの領域での応用が期待されます。新しいAIの時代が、
いよいよ動き始めた感がありますね。
出典 : 楽天グループがMoEアーキテクチャー採用のLLMを発表、同社初のSLMも https://xtech.nikkei.com/atcl/nxt/news/24/01966/