Funkcje wpływu i śledzenie przykładów treningowych

Influence functions and training example tracing · id influencefunctions · aliases: influence functions, training example tracing, funkcje wpływu, śledzenie przykładów treningowych

Gradientowe przybliżenia wpływu przykładu treningowego na predykcję testową: klasyczne funkcje wpływu, TRAK i ich skalowalne warianty.

Gradient-based approximations of a training example's influence on a test prediction: classical influence functions, TRAK and scalable variants.

In one sentence

Wskazywanie przykładów treningowych, które najbardziej popchnęły model do danej odpowiedzi, bez trenowania go od nowa.

Pointing to the training examples that most pushed a model towards a given answer, without retraining it.

Problem it solves

Przetrenowanie modelu bez każdego podejrzanego przykładu z osobna trwałoby lata, a trzeba szybko znaleźć źródło błędu.

Retraining a model without each suspicious example one by one would take years, yet the cause of an error is needed fast.

What it does

Działa jak śledzenie tropu wstecz: z kierunku, w którym każdy przykład pchał parametry, szacuje jego udział w odpowiedzi.

It traces footprints backwards: from the direction each example pushed the parameters, it estimates its share in the answer.

Everyday example

Klasyfikator zdjęć myli wilka z husky, a lista najbardziej wpływowych przykładów pokazuje zdjęcia psów na śniegu.

A photo classifier confuses a wolf with a husky, and the most influential examples turn out to be dogs on snow.

This concerns you if you…

Related topics

Sources