Ciągłe uczenie ze wzmocnieniem

Continual reinforcement learning · id continualrl · aliases: continual RL, lifelong RL, non-stationary RL

Uczenie ze wzmocnieniem w warunkach niestacjonarnych, bez wyraźnego końca treningu, wraz z problemem utraty plastyczności sieci głębokich.

Reinforcement learning under nonstationarity without a fixed end of training, including the loss of plasticity in deep networks.

In one sentence

Agent uczy się bez końca w zmieniającym się świecie i nie może „zesztywnieć” po pierwszych doświadczeniach.

An agent learns without end in a changing world and must not 'stiffen up' after its first experiences.

Problem it solves

Długo trenowany agent z czasem coraz gorzej przyswaja nowe rzeczy, a do tego zapomina dawne, gdy świat się zmienia.

An agent trained for a long time gradually absorbs new things less well, and forgets old ones when the world changes.

What it does

Jak ogrodnik, który przycina część starych gałęzi, żeby drzewo miało siłę wypuszczać nowe pędy.

Like a gardener who prunes some old branches so the tree has strength to grow new shoots.

Everyday example

System sterujący ogrzewaniem budynku uczy się przez lata, dopasowując się do nowych lokatorów, por roku i wymienionych urządzeń.

A building's heating controller learns for years, adapting to new tenants, seasons and replaced equipment.

This concerns you if you…

Sources