日本のスタートアップ「Sakana AI」が、革新的な自己適応型言語モデル「Transformer2」を開発しました。このモデルは従来の大規模言語モデル(LLM)の問題点を克服する新技術を導入しており、新たなタスクに遭遇しても迅速に適応する能力を持っています。
特異値分解と強化学習を活用したこのシステムは、タスク理解と最適な重み付けの調整を行い、精度の高い応答を生成できます。
プロンプト、分類機能、Few-shot学習といった戦略を駆使して、少ないデータからでも高い柔軟性でタスクに対応。
期待されている「Transformer2」は、一歩先行くAIの実現に向けた、Sakana AIの野心的な試みと言えるでしょう。
出典 : 次世代のAI技術のSakana AI、自己適応型LLM「Transformer2」を発表 動的な学習能力を実現 https://www.atpartners.co.jp/news/2025-01-31-sakana-ai-the-next-generation-of-ai-technology-announces-transformer2-a-self-adaptive-llm-with-dynamic-learning-capabilities