Podziały i wyciek danych

Data splits and leakage · id splits

Oddzielenie materiału do nauki od uczciwego sprawdzianu.

Keeping study material apart from an honest exam.

In one sentence

To oddzielanie materiału do nauki modelu od przykładów używanych do jego sprawdzania.

This separates a model's learning material from the examples used to assess it.

Problem it solves

Dobry wynik niczego nie dowodzi, jeśli model widział już odpowiedzi na pytania ze sprawdzianu.

A good score proves little if the model has already seen answers to its test questions.

What it does

Odkłada osobne zbiory do nauki, wyboru ustawień i końcowej oceny, sprawdzając, czy informacje nie przenikają między nimi.

It sets aside separate collections for learning, choosing settings and final assessment, checking whether information crosses between them.

Everyday example

Uczysz program rozpoznawać wady produktów i sprawdzasz go na zdjęciach, których nie używano podczas nauki ani dobierania ustawień.

You train software to recognise product defects and test it on photos never used for learning or choosing settings.

This concerns you if you…

Examples

Subtopics

Related topics

Sources