2023年は、大規模言語モデル(LLM)によるAIの革命が加速しています。
LLMはブラックボックスとされ、膨大なデータセット上でディープラーニングを行い新しいテキストを生成する技術です。
特に2014年の注意機構導入や2017年のトランスフォーマーモデルの登場によって急速に進化しました。
今日最も知られているモデルはトランスフォーマーを基にしており、OpenAIのChatGPTがその一例で、わずか2ヶ月で1億人以上のユーザーを獲得しました。
この分野の継続的な発展は目まぐるしいですが、GoogleのBERTや最新のGPT-4まで、多くの影響力あるモデルが存在します。
BERTは342億のパラメーターを持ち、OpenAIのGPTシリーズはAIの一般化知能(AGI)に迫ると言われています。
GPT-3.5はChatGPTを搭載し、2021年9月までのデータで学習しました。
更にGPT-4oはマルチモーダル機能を持ち、画像や音声も扱えます。
これらはほんの一部ですが、これらのモデルによって、AIは私たちの生活やビジネスを大きく変えつつあります。
今後も彼らの進化から目を離せません。
出典 : 19 of the best large language models in 2024 https://www.techtarget.com/whatis/feature/12-of-the-best-large-language-models