Zadanie i rodzina metod, w których agent wcielony nawiguje w realistycznych wnętrzach według instrukcji w języku naturalnym, oceniane na benchmarkach typu R2R.
A task and family of methods in which an embodied agent navigates realistic interiors by natural-language instructions, evaluated on benchmarks such as R2R.
Robot porusza się po budynku, wykonując wskazówki typu „wyjdź z kuchni, skręć w lewo i zatrzymaj się przy schodach”.
A robot moves through a building following directions like “leave the kitchen, turn left and stop by the stairs”.
Ludzie opisują drogę słowami i punktami orientacyjnymi, a nie współrzędnymi, których robot zwykle potrzebuje.
People describe routes with words and landmarks, not the coordinates robots usually need.
Dopasowuje kolejne części wskazówki do tego, co robot akurat widzi, jak turysta czytający opis trasy i rozglądający się za znakami.
It matches each part of the directions to what the robot currently sees, like a tourist reading route notes and looking for landmarks.
Prosisz robota w biurze: „idź do sali obok automatu z kawą”, a on sam znajduje drogę bez mapy z opisanymi pokojami.
You tell an office robot “go to the room next to the coffee machine”, and it finds the way without a map of labelled rooms.