# Automatyczne sprawdzanie krótkich odpowiedzi

EN: **Automatic short-answer grading** · id `shortanswergrading` · aliases: ASAG, short answer grading, automatic short answer scoring, LLM grading, sprawdzanie odpowiedzi otwartych

Path: [AI Atlas](https://aiatlasgraph.com/llms.txt) › [AI w edukacji](https://aiatlasgraph.com/t/aied.md) › [Automatyczne ocenianie i informacja zwrotna](https://aiatlasgraph.com/t/autoassessment.md) › Automatyczne sprawdzanie krótkich odpowiedzi

## Description

- PL: Ocena krótkich odpowiedzi tekstowych względem odpowiedzi wzorcowej na różnych przedmiotach i skalach ocen.
- EN: Scoring short text answers against a reference answer across subjects and grading scales.

## In one sentence

- PL: Programy, które porównują krótką odpowiedź ucznia z odpowiedzią wzorcową i przyznają punkty.
- EN: Software that compares a learner's short answer with a reference answer and awards points.

## Problem it solves

- PL: Pytania otwarte lepiej sprawdzają zrozumienie niż test wyboru, ale ich ręczne sprawdzanie w dużej grupie trwa bardzo długo.
- EN: Open questions test understanding better than multiple choice, but marking them by hand for a large group takes very long.

## What it does

- PL: Jak asystent z kluczem odpowiedzi, który rozpoznaje tę samą myśl wyrażoną innymi słowami, a nie tylko identyczne sformułowania.
- EN: Like an assistant holding the answer key who recognises the same idea in different words, not just identical wording.

## Everyday example

- PL: Na kursie online student odpowiada dwoma zdaniami, dlaczego liście są zielone, i od razu dostaje punkty oraz wskazówkę o brakującym pojęciu.
- EN: On an online course a student answers in two sentences why leaves are green and immediately gets points and a hint about the missing concept.

## This concerns you if you…

- PL: układasz quizy z pytaniami otwartymi
- PL: sprawdzasz kolokwia dużych grup
- EN: build quizzes with open questions
- EN: mark tests for large groups

## Keywords

ASAG2024 · SemEval-2013 Task 7 · SciEntsBank · Mohler dataset · sentence-BERT · LLM-as-a-judge · rubric grading

## How it works

- PL: Wcześniejsze metody mierzą podobieństwo odpowiedzi do wzorca za pomocą cech leksykalnych lub embeddingów albo dostrajają klasyfikator na ocenionych odpowiedziach. Duże modele językowe mogą oceniać odpowiedź w kontekście bez osobnego treningu. Benchmark ASAG2024 łączy siedem anglojęzycznych zbiorów do wspólnej skali, aby sprawdzać generalizację między pytaniami i przedmiotami.
- EN: Earlier methods measure similarity to a reference using lexical features or embeddings, or fine-tune a classifier on scored answers. Large language models can score an answer in context without separate training. The ASAG2024 benchmark combines seven English-language datasets on a common scale to test generalisation across questions and subjects.

## Limits

- PL: Metody oparte na LLM poprawiają wyniki, ale wciąż są daleko od poziomu ludzi. Oceny bywają niestabilne przy zmianie sformułowania promptu i rubryki. Przy ocenach liczących się do zaliczenia potrzebna jest kontrola nauczyciela.
- EN: LLM-based methods raise scores but remain far from human performance. Grades can be unstable when prompt or rubric wording changes. Grades that count towards passing need teacher oversight.

## Key terms

- PL: **odpowiedź wzorcowa**: Przykładowa poprawna odpowiedź, z którą porównuje się odpowiedź ucznia.
- PL: **generalizacja**: Utrzymanie jakości przy nowych pytaniach, przedmiotach i skalach ocen.
- EN: **reference answer**: An example correct answer the learner's answer is compared with.
- EN: **generalisation**: Maintaining quality across new questions, subjects and grading scales.

## Know first

- [Embeddingi zdań i dokumentów (modele embeddingowe) (Sentence and document embeddings (embedding models))](https://aiatlasgraph.com/t/textembeddings.md)
- [Walidacja ewaluatorów (Evaluator validation against human labels)](https://aiatlasgraph.com/t/judgevalidation.md)

## Related topics

Untyped, symmetric "see also" links.

- [Ocena ludzi i modeli (Human evaluation and model judges)](https://aiatlasgraph.com/t/judges.md)

## Sources

- [ASAG2024: A Combined Benchmark for Short Answer Grading](<https://arxiv.org/abs/2409.18596>) `asag2024-2024` · by Gérôme Meyer, Philip Breuer, Jonathan Fürst

---

AI Atlas revision 122 (2026-10-30) · HTML: https://aiatlasgraph.com/t/shortanswergrading · index: https://aiatlasgraph.com/llms.txt · everything: https://aiatlasgraph.com/llms-full.txt · updated 2026-10-30