株式会社LegalOn Technologiesは、法的文書の理解度を測るための新たな評価基準「LegalRikai」を開発しました。これまでの言語モデルは、主に英語のデータセットをもとにしており、日本固有の法律や規制の理解は未知数でした。
しかし、国内外の研究機関が開発したベンチマークデータセットの中で、日本の法制に特化したものは存在しなかったため、このニーズに応える形の「LegalRikai」は画期的なものです。
このベンチマークは、LLMが契約書の条文のキーワード検出や修正文の提案など、法律に基づいたタスクをどれだけ適切に処理できるかを評価します。
現在は社内での利用が中心ですが、将来的には公開され、LLMの性能比較にも使われる予定です。法律とテクノロジーが融合する未来に向け、必見のプロジェクトです。
出典 : LegalOn Technologies、 日本の法規制に基づいて大規模言語モデル(LLM)が 法的タスクを適切に解決・処理できるかを 評価できるベンチマークデータセット「LegalRikai」を開発 ～法の分野でLLMの評価と適正モデルの比較に役立てる～ – 株式会社LegalOn Technologies｜リーガルオンテクノロジーズ https://legalontech.jp/8872/
