Douczanie robota próbami w realnym świecie z pomocą człowieka

Real-world reinforcement learning with human interventions · id realworldrl · aliases: real-world RL, human-in-the-loop RL, robot reinforcement learning on hardware, RL na prawdziwym robocie, uczenie z interwencjami człowieka

Uczenie ze wzmocnieniem bezpośrednio na fizycznym robocie, z inicjalizacją z demonstracji, korektami operatora w trakcie prób i nagrodą z klasyfikatora sukcesu.

Reinforcement learning directly on a physical robot, initialised from demonstrations, with operator corrections during trials and reward from a success classifier.

In one sentence

Robot ćwiczy zadanie na prawdziwym stanowisku, a człowiek od czasu do czasu go poprawia, aż robot zacznie robić to szybko i bezbłędnie.

A robot practises a task at a real workstation while a person corrects it now and then, until it does it quickly and flawlessly.

Problem it solves

Robot nauczony samymi pokazami wykonuje zadanie poprawnie tylko część razy, a fabryce potrzebna jest niezawodność bliska stu procent.

A robot taught only by demonstrations gets the task right only part of the time, while a factory needs near-total reliability.

What it does

Jak uczeń przy instruktorze jazdy: próbuje sam, instruktor przejmuje kierownicę przed błędem, a robot uczy się i z sukcesów, i z poprawek.

Like a learner with a driving instructor: it tries alone, the instructor grabs the wheel before a mistake, and the robot learns from both successes and corrections.

Everyday example

W ciągu popołudnia ramię uczy się wkładać elementy do płyty tak sprawnie, że przestaje mylić się nawet przy przesuniętej płycie.

Within an afternoon an arm learns to insert components into a board so well that it stops failing even when the board is shifted.

This concerns you if you…

Related topics

Sources