Wykrywanie błędnych etykiet

Label error detection · id labelerrors · aliases: confident learning, noisy labels, cleanlab

Automatyczne znajdowanie przykładów, które mają prawdopodobnie złą etykietę, na podstawie przewidywań modelu — zamiast ręcznego przeglądania całego zbioru.

Automatically finding examples that probably carry a wrong label, using model predictions, instead of reviewing the whole dataset by hand.

In one sentence

To wyszukiwanie przykładów, których zapisane oznaczenia mogą być błędne.

This finds examples whose recorded labels may be wrong.

Problem it solves

Model uczy się mylących odpowiedzi, bo część przykładów została źle opisana.

A model learns misleading answers because some examples were labelled incorrectly.

What it does

Porównuje zapisane odpowiedzi z przewidywaniami modelu i tworzy listę rozbieżności do sprawdzenia przez człowieka.

It compares recorded answers with model predictions and creates a list of disagreements for a person to review.

Everyday example

W archiwum opinii program wskazuje pochwałę oznaczoną jako skarga, a ty sprawdzasz, czy zapis wymaga poprawy.

In a review archive, software flags praise labelled as a complaint, and you check whether the record needs correcting.

This concerns you if you…

Examples

Related topics

Sources