Percepcja zorientowana na działanie: estymacja pozy 6D, afordancji i stanu kontaktu z obrazu, głębi, chmur punktów i czujników dotykowych.
Action-oriented perception: estimating 6D pose, affordances and contact state from images, depth, point clouds and tactile sensors.
Robot musi nie tylko zobaczyć przedmiot, ale też wiedzieć, gdzie dokładnie leży, jak go chwycić i jak mocno go dotyka.
A robot must not only see an object but know exactly where it is, how to hold it and how hard it is touching it.
Rozpoznanie „to jest kubek” nie wystarcza ręce robota, która musi trafić w ucho kubka z dokładnością do milimetrów.
Knowing “this is a mug” is not enough for a robot hand that must hit the mug's handle within millimetres.
Zamienia obraz z kamer i sygnały z czujników nacisku na liczby, z których planer ruchu może od razu skorzystać.
It turns camera images and pressure-sensor signals into numbers a motion planner can use straight away.
Ramię w magazynie wyjmuje z pojemnika pomieszane paczki, za każdym razem ustawiając chwytak pod innym kątem.
A warehouse arm pulls jumbled parcels out of a bin, angling its gripper differently for each one.