LegalBenchは、大規模言語モデル(LLM)の法的推論能力を評価するために作られたベンチマークである。スタンフォード大学のニール・グハらを中心に法律専門家と研究者が共同で構築し、2023年に公開された。争点の特定、ルールの想起、ルールの適用、結論の導出、解釈など、複数の種類にわたる160余りの法律タスクで構成される。
タスクは法律実務と法学で用いられる推論類型の分類に基づいて設計されており、法律分野におけるモデル性能の比較や、モデルやプロンプトを変更した際の影響の確認に広く使われている。
大規模言語モデルの法的推論能力を測るために法律専門家と研究者が共同構築したベンチマーク。
LegalBenchは、大規模言語モデル(LLM)の法的推論能力を評価するために作られたベンチマークである。スタンフォード大学のニール・グハらを中心に法律専門家と研究者が共同で構築し、2023年に公開された。争点の特定、ルールの想起、ルールの適用、結論の導出、解釈など、複数の種類にわたる160余りの法律タスクで構成される。
タスクは法律実務と法学で用いられる推論類型の分類に基づいて設計されており、法律分野におけるモデル性能の比較や、モデルやプロンプトを変更した際の影響の確認に広く使われている。
この説明は、AIPOSTの記事と広く知られた事実をもとにまとめたものです。誤りがあれば訂正依頼でお知らせください。
LegalBench -66.9% -0.8ポイント
記事を読む事典の説明は、AIPOSTの記事と広く知られた事実をもとにまとめています。誤りは訂正依頼でお知らせいただければ、確認して修正します。新しい記事に登場した名前は、記事の公開後に事典に加わります。