# Benchmarki modeli prawniczych

EN: **Legal AI benchmarks** · id `legalbenchmarks` · aliases: legal benchmarks, LegalBench, LexGLUE, legal LLM evaluation, bar exam evaluation, benchmarki prawnicze, ewaluacja modeli w prawie

Path: [AI Atlas](https://aiatlasgraph.com/llms.txt) › [AI w prawie](https://aiatlasgraph.com/t/legalai.md) › Benchmarki modeli prawniczych

## Description

- PL: Zestawy zadań do oceny modeli na tekstach prawnych, obejmujące rozumienie języka, klasyfikację i różne typy rozumowania prawniczego.
- EN: Task collections for evaluating models on legal text, covering language understanding, classification, and multiple forms of legal reasoning.

## In one sentence

- PL: Zestawy zadań przygotowane przez prawników, które sprawdzają, w czym model językowy radzi sobie z prawem, a gdzie zawodzi.
- EN: Task sets prepared by lawyers that check where a language model handles law well and where it fails.

## Problem it solves

- PL: Bez wspólnych testów każdy producent chwali się własnymi wynikami, a kancelaria nie ma jak porównać narzędzi przed zakupem.
- EN: Without shared tests every vendor boasts its own results, and a law firm has no way to compare tools before buying.

## What it does

- PL: Rozbija pracę prawnika na drobne umiejętności, np. rozpoznanie problemu czy odczytanie definicji, i każdą mierzy osobnym zestawem pytań.
- EN: It breaks legal work into small skills, such as spotting an issue or reading a definition, and measures each with its own set of questions.

## Everyday example

- PL: Dział innowacji kancelarii porównuje trzy asystenty na tych samych stu zadaniach i widzi, że najlepszy w streszczeniach słabo stosuje przepisy do faktów.
- EN: A law firm's innovation team compares three assistants on the same hundred tasks and sees that the best summariser is weak at applying rules to facts.

## This concerns you if you…

- PL: wybierasz narzędzie AI dla kancelarii lub działu prawnego
- PL: budujesz model do zadań prawniczych
- EN: choose an AI tool for a law firm or legal team
- EN: build a model for legal tasks

## Keywords

LegalBench · LexGLUE · CaseHOLD · LawBench · Uniform Bar Exam · LEXam · issue spotting · rule application

## How it works

- PL: LegalBench grupuje zadania w sześć typów rozumowania zaprojektowanych przez prawników, a LexGLUE standaryzuje zróżnicowane zadania rozumienia języka prawnego. Wyniki oblicza się metrykami właściwymi dla zadania; pojedynczy wynik zbiorczy nie zastępuje analizy poszczególnych kompetencji.
- EN: LegalBench groups tasks into six types of reasoning designed by legal professionals, while LexGLUE standardizes diverse legal language-understanding tasks. Results use task-appropriate metrics; a single aggregate score does not replace analysis of individual capabilities.

## Limits

- PL: Zakres benchmarków jest nierówny: część mierzy krótkie zadania zamknięte, a nie długą pracę na aktach. LegalBench i LexGLUE skupiają się na języku angielskim i wybranych jurysdykcjach, więc wynik słabo mówi o innych systemach prawnych.
- EN: Benchmark coverage is uneven: some measure short closed-form tasks rather than long-document case work. LegalBench and LexGLUE focus on English and selected jurisdictions, so their scores say little about other legal systems.

## Key terms

- PL: **issue spotting**: Rozpoznanie, jakie problemy prawne kryją się w faktach.
- PL: **nasycenie benchmarku**: Moment, gdy modele osiągają prawie maksimum i test przestaje rozróżniać.
- EN: **issue spotting**: Recognising which legal issues lie in a set of facts.
- EN: **benchmark saturation**: When models score near the maximum and a test stops discriminating.

## Know first

- [Benchmarki modeli językowych (LLM benchmarks)](https://aiatlasgraph.com/t/llmbenchmarks.md)
- [Przeciek danych i nasycenie benchmarków (Benchmark contamination and saturation)](https://aiatlasgraph.com/t/benchcontamination.md)

## Related topics

Untyped, symmetric "see also" links.

- [Benchmarki wiedzy i rozumowania (Knowledge and reasoning benchmarks)](https://aiatlasgraph.com/t/knowledgebench.md)

## Sources

- [LegalBench: A Collaboratively Built Benchmark for Measuring Legal Reasoning in Large Language Models](<https://arxiv.org/abs/2308.11462>) `guha-legalbench-2023` · by Neel Guha, Julian Nyarko, Daniel E. Ho, Christopher Ré i in. (39 autorów)
- [LexGLUE: A Benchmark Dataset for Legal Language Understanding in English](<https://arxiv.org/abs/2110.00976>) `chalkidis-lexglue-2021` · by Ilias Chalkidis, Abhik Jana, Dirk Hartung, Michael Bommarito, Ion Androutsopoulos, Daniel Martin Katz, Nikolaos Aletras

---

AI Atlas revision 122 (2026-10-30) · HTML: https://aiatlasgraph.com/t/legalbenchmarks · index: https://aiatlasgraph.com/llms.txt · everything: https://aiatlasgraph.com/llms-full.txt · updated 2026-10-30