Odwrotne RL i imitacja adwersarialna (IRL, GAIL)

Inverse RL and adversarial imitation · id irl

Zamiast kopiować akcje, odtwarza się cel (nagrodę), który wyjaśnia zachowanie eksperta, albo uczy politykę tak, by dyskryminator nie odróżnił jej od demonstracji.

Instead of copying actions, recover the goal (reward) that explains expert behaviour, or train a policy so a discriminator cannot tell it from the demonstrations.

In one sentence

To uczenie działania przez odtwarzanie celu pokazów lub upodabnianie całego zachowania do demonstracji.

This learns actions by inferring demonstration goals or making overall behaviour resemble the demonstrations.

Problem it solves

Samo kopiowanie pojedynczych ruchów nie wyjaśnia, jaki wynik człowiek chciał osiągnąć ani jak zachować podobny sposób działania.

Copying individual moves does not explain the person's intended outcome or how to retain a similar overall way of acting.

What it does

Szuka oceny celu wyjaśniającej pokazy albo korzysta z wyuczonego porównania przebiegów programu z demonstracjami, żeby poprawiać zachowanie.

It seeks a goal score explaining demonstrations or uses a learned comparison between program sequences and demonstrations to improve behaviour.

Everyday example

Robot obserwuje odkładanie przedmiotów i uczy się zachowania prowadzącego do podobnego uporządkowania, zamiast powtarzać dokładnie każdy gest.

A robot observes objects being put away and learns behaviour producing similar organisation rather than repeating every gesture exactly.

This concerns you if you…

Examples

Related topics

Sources