プレイブックに基づく契約書レビューにおけるLLMの性能検証 - LegalOn Technologies Engineering Blog

こんにちは、株式会社LegalOn TechnologiesのAIセクションチームです。LegalOn Technologiesでは、日本の法務分野における自然言語処理（NLP）のための包括的なベンチマークデータセット、LegalRikaiを作成しています。LegalRikaiは日本法に特化したさまざまなタスクを含むベンチマークデータセットで、法務NLPベンチマークデータセットの現状における重要なギャップを埋めることを目的としています。 この記事は、前回公開した記事の続編として、プレイブックに基づく契約書レビュータスクを紹介し、本タスクに対するモデルとPromptの性能検証を紹介します。 タスク紹介 法務実務では、契約を締結する前に、法的なリスクや不利益な内容がないかなどを確認・精査する作業（契約書レビュー）を行います。このプロセスを通じて、将来的なトラブルや予期せぬ損失を防ぎ、公正で安全