JetBrainsは、「JetBrains AI Assistant」の新機能として開発者が最適な言語モデルを選べるようになったことを2025年に報じました。このツールは、JetBrainsが提供する統合開発環境に組み込むことができ、コーディングの手助けをするというものです。
比較のために用いた指標は、Pythonの問題をどれだけ解決できるかを見るHumanEval+、実際のユーザーフィードバックに基づくChatBot Arena、そして複数のプログラミング言語でのコーディング技術を評価するAider Polyglotです。
開発者たちはこれらの評価を参考にしながら、OpenAI、Google、Anthropicといった有名モデルを比較し、自分のニーズに最適な支援を得ることができるようになります。
出典 : JetBrainsがOpenAI、Google、Anthropicの11モデルをベンチマーク比較 速度や知能別で優れたモデルを紹介 https://atmarkit.itmedia.co.jp/ait/articles/2503/27/news117.html
