LegalRikai: 日本法務分野のためのNLPベンチマークデータセット - LegalOn Technologies Engineering Blog

こんにちは、株式会社LegalOn Technologiesでソフトウェアエンジニアをしている高橋です。 LegalOn Technologiesでは、日本の法務分野における自然言語処理（NLP）のための包括的なベンチマークデータセット、LegalRikaiを作成しています。LegalRikaiは日本法に特化したさまざまなタスクを含むベンチマークデータセットで、法務NLPベンチマークデータセットの現状における重要なギャップを埋めることを目的としています。 LegalRikai作成の背景と目的 近年、大規模言語モデル（LLM）の登場により、リーガルテックを含む様々な分野が大きく前進しました。しかし、これらのモデルは主に英語の一般知識を評価するために設計されたベンチマークデータセットを用いて評価されることが多く、英語で高い性能を発揮すれば、他の言語や分野でも高い能力を発揮できるという前提につな