MITの研究者たちが開発した「Co-LLM」という新しいアルゴリズムが、大規模言語モデルの精度を向上させる手段を提供しています。
このアルゴリズムは、一般的な言語モデルと専門知識を持つ別のモデルを組み合わせ、協力させることで、例えば医療関連の質問や数学、推論問題に対するより正確な回答を生成します。
特に専門モデルが必要な部分では、専門モデルから正確な答えを導出し、一般モデルの補助を行う仕組みです。
この過程で、専門家のように必要な時にのみ、より詳しい情報を提供するモデルが活用されます。
研究チームは、将来的には新しい情報が入手できた際に、基本モデルの学習を通じて専門モデルを最新の状態に更新することを目指しています。
これにより、常に最新かつ論理的な回答を提供することができるようになるでしょう。
また、Co-LLMは個別のモデルやプライベートモデルと強力なモデルを組み合わせることにより、サーバー内に留めておかなければならない資料の向上にも寄与します。
この研究は注目されるものであり、専門モデル群を組み合わせて高価な一枚岩のAIシステムの性能を上回ることを目指す重要な研究の一環です。
出典 : Enhancing LLM collaboration for smarter, more efficient solutions https://news.mit.edu/2024/enhancing-llm-collaboration-smarter-more-efficient-solutions-0916