# Automatyczne ocenianie i informacja zwrotna EN: **Automated assessment and feedback** · id `autoassessment` · aliases: automated assessment, automated grading, automatic scoring, AI grading, assessment and evaluation, automatyczne sprawdzanie prac, ocenianie przez AI Path: [AI Atlas](https://aiatlasgraph.com/llms.txt) › [AI w edukacji](https://aiatlasgraph.com/t/aied.md) › Automatyczne ocenianie i informacja zwrotna ## Description - PL: Automatyczne ocenianie wypracowań i krótkich odpowiedzi, generowanie informacji zwrotnej oraz tworzenie pytań i dystraktorów do testów. - EN: Automated scoring of essays and short answers, feedback generation, and creation of test questions and distractors. ## In one sentence - PL: Programy, które sprawdzają wypracowania i krótkie odpowiedzi, piszą uczniowi komentarz i pomagają układać pytania do testów. - EN: Software that marks essays and short answers, writes comments for the learner and helps draft test questions. ## Problem it solves - PL: Sprawdzanie stosu prac zajmuje nauczycielom wieczory i weekendy, a uczeń dostaje uwagi po tygodniu, gdy już nie pamięta, co pisał. - EN: Marking a pile of papers eats teachers' evenings and weekends, and students get comments a week later, when they no longer recall what they wrote. ## What it does - PL: Jak drugi egzaminator, który czyta szybko i według tego samego klucza, a wątpliwe przypadki odkłada do sprawdzenia człowiekowi. - EN: Like a second examiner who reads fast against the same marking key and sets doubtful cases aside for a person to check. ## Everyday example - PL: Student wysyła krótką odpowiedź na pytanie z biologii i po chwili dostaje punkty oraz informację, którego elementu zabrakło. - EN: A student submits a short answer to a biology question and soon receives points plus an indication of what was missing. ## This concerns you if you… - PL: sprawdzasz dużo prac pisemnych - PL: zdajesz egzamin, w którym część ocenia komputer - PL: chcesz szybciej przygotowywać testy i quizy - EN: mark a lot of written work - EN: take an exam partly scored by a computer - EN: want to build tests and quizzes faster ## Keywords automated essay scoring · automatic short answer grading · quadratic weighted kappa · rubric-based grading · LLM-as-a-grader · autograder · automatic question generation · distractor generation · formative feedback · ASAP dataset ## How it works - PL: Modele uczą się na pracach ocenionych przez ludzi: od regresji na cechach tekstu po dostrojone transformery i modele językowe oceniające według odpowiedzi wzorcowej lub rubryki. Pytania powstają z materiału źródłowego za pomocą reguł, modeli seq2seq albo promptów. Jakość oceniania mierzy się zgodnością z ludźmi, a pytania wymagają osobnej oceny poprawności i wartości dydaktycznej. - EN: Models learn from human-scored work: from regression on text features to fine-tuned transformers and language models scoring against a reference answer or rubric. Questions are generated from source material using rules, sequence-to-sequence models or prompts. Grading quality is measured by agreement with people, while questions need separate review for correctness and educational value. ## Limits - PL: Wysoka zgodność z ludźmi nie oznacza, że model rozumie treść: bywa wrażliwy na długość tekstu i sztuczki. Przy egzaminach o wysokiej stawce potrzebny jest nadzór człowieka i możliwość odwołania. Pytania generowane automatycznie wymagają przeglądu eksperta. - EN: High agreement with humans does not mean the model grasps content: it can be swayed by length and tricks. High-stakes exams need human oversight and a right to appeal. Automatically generated questions require expert review. ## Key terms - PL: **rubryka**: Lista kryteriów i poziomów, według których ocenia się pracę. - PL: **QWK**: Ważona kappa: miara zgodności ocen modelu i człowieka. - PL: **ocenianie holistyczne**: Jedna ogólna ocena całej pracy zamiast ocen za osobne cechy. - EN: **rubric**: A list of criteria and levels used to grade work. - EN: **QWK**: Quadratic weighted kappa: agreement between model and human scores. - EN: **holistic scoring**: One overall grade for the work instead of per-trait grades. ## Know first - [Klasyfikacja tekstu i analiza sentymentu (Text classification and sentiment analysis)](https://aiatlasgraph.com/t/textclassification.md) - [Ocena ludzi i modeli (Human evaluation and model judges)](https://aiatlasgraph.com/t/judges.md) ## Subtopics (6 direct, 7 in total) - [Automatyczna ocena wymowy (Automatic pronunciation assessment (CAPT))](https://aiatlasgraph.com/t/pronunciationassess.md): Assessing language learners' pronunciation at the phone level and the prosodic level (stress, rhythm, intonation); the core of computer-assisted pronunciation training. - [Automatyczna ocena wypracowań (Automated essay scoring)](https://aiatlasgraph.com/t/aes.md): Predicting a holistic score or trait scores (coherence, argumentation, prompt adherence) for student-written texts. - [Automatyczne komentarze do wypracowań (Automated writing evaluation and feedback (AWE))](https://aiatlasgraph.com/t/awefeedback.md): Systems that generate feedback on learner writing (grammar, style, structure, and content), traditionally using rule-based and statistical methods; generative language models are being studied as a newer possibility. - [Automatyczne sprawdzanie krótkich odpowiedzi (Automatic short-answer grading)](https://aiatlasgraph.com/t/shortanswergrading.md): Scoring short text answers against a reference answer across subjects and grading scales. - [Automatyczne sprawdzanie zadań programistycznych (Automated grading and feedback for programming assignments)](https://aiatlasgraph.com/t/progautograding.md): Tools that assess the correctness and selected quality characteristics of student code through dynamic analysis (such as unit tests), static analysis, or comparison with reference solutions. - [Automatyczne tworzenie pytań i testów (Automatic question generation for education)](https://aiatlasgraph.com/t/questiongen.md): Generating questions (open, cloze, multiple-choice) and distractors from instructional text, with control over difficulty and cognitive level. - [Komputerowe testowanie adaptacyjne (CAT) (Computerized adaptive testing (CAT))](https://aiatlasgraph.com/t/cat.md): A testing procedure that draws each next item from a calibrated bank to give the most information at the current ability estimate. ## Sources - [Systematic review of research on artificial intelligence applications in higher education – where are the educators?]() `zawacki-richter-aied-review-2019` · by Olaf Zawacki-Richter, Victoria I. Marín, Melissa Bond, Franziska Gouverneur - [Automated Essay Scoring: A Survey of the State of the Art]() `ke-ng-aes-survey-2019` · by Zixuan Ke, Vincent Ng - [ASAG2024: A Combined Benchmark for Short Answer Grading]() `asag2024-2024` · by Gérôme Meyer, Philip Breuer, Jonathan Fürst - [A literature review of research on question generation in education]() `dong-qged-review-2025` · by Xiaohui Dong, Xinyu Zhang, Zhengluo Li, Quanxin Hou, Jixiang Xue, Xiaoyi Li --- AI Atlas revision 122 (2026-10-30) · HTML: https://aiatlasgraph.com/t/autoassessment · index: https://aiatlasgraph.com/llms.txt · everything: https://aiatlasgraph.com/llms-full.txt · updated 2026-10-30