NCSOFT Corp.は、AIの大規模言語モデル（LLMs）の性能と能力を検証する韓国初の評価モデル「VARCO Judge LLM」を公開しました。新しい評価モデルは、他のLLMsがタスクをどれだけ迅速かつ正確に行えるかをチェックします。
AIベースのサービスを開発する企業は、このモデルを使って様々なLLMsの品質を素早く比較・評価し、自社サービスに最適なモデルを選択できます。研究開発企業も、自社のLLMsのパフォーマンスレベルを確認し、優れた点をアピールしたり、弱点を早急に改善したりすることが可能です。
NCSOFTは、「VARCO Judge LLM」が同クラスのモデルの中で最高の性能を持つと説明し、自社のLLM「VARCO」の品質向上に役立てる計画です。研究部門の責任者であるイ・ヨンス氏は、「急速に進化するAI市場において、業界ごとに最適なモデルを選んで適用するサービスが重要になっている」と述べ、その新ツールの重要性を強調しています。
出典 : NCSOFT launches evaluation model to verify performance of AI LLMs https://www.kedglobal.com/artificial-intelligence/newsView/ked202409230015