Augmentacja obserwacji w RL z obrazu

Data augmentation for pixel-based reinforcement learning · id rlaugmentation · aliases: image augmentation RL, augmentacja w RL

Regularyzacja RL z obserwacji wizualnych przez losowe przekształcenia obrazów z bufora doświadczeń, poprawiająca efektywność próbkową i odporność.

Regularising RL from visual observations through random transformations of replay-buffer images, improving sample efficiency and robustness.

In one sentence

Agent uczący się z obrazu ogląda te same klatki lekko przesunięte lub zmienione, żeby nie przywiązywać się do szczegółów.

An agent learning from images sees the same frames slightly shifted or altered, so it doesn't cling to details.

Problem it solves

Agent uczący się z obrazu potrzebuje bardzo wielu prób i łatwo zapamiętuje przypadkowe piksele zamiast tego, co ważne.

An agent learning from images needs a great many trials and easily memorises incidental pixels instead of what matters.

What it does

Jak nauka rozpoznawania ptaków ze zdjęć robionych pod różnymi kątami: uwaga przenosi się z tła na samego ptaka.

Like learning birds from photos taken at different angles: attention moves from the background to the bird itself.

Everyday example

Robot uczący się chwytać z kamery działa dalej, gdy kamerę ktoś lekko przestawi lub zmieni się oświetlenie.

A robot learning to grasp from a camera keeps working when someone nudges the camera or the lighting changes.

This concerns you if you…

Sources