Modele wizja–język–akcja (VLA)

Vision-language-action models (VLA) · id vla

Modele dla robotów łączące percepcję wzrokową, instrukcje językowe i generowanie akcji, rozwijane jako ogólne polityki przenoszone między zadaniami i robotami.

Robot models combining visual perception, language instructions and action generation, developed as generalist policies transferable across tasks and robots.

In one sentence

To modele, które łączą obraz otoczenia z poleceniem słownym, żeby proponować ruchy robota.

These models combine a view of the surroundings with a spoken or written instruction to propose robot actions.

Problem it solves

Robot musi powiązać to, co widzi, z tym, o co prosisz, i przełożyć oba sygnały na działanie.

A robot must connect what it sees with what you request and translate both signals into action.

What it does

Uczy powiązania obserwacji, poleceń i ruchów na przykładach zadań; zakres przenoszenia na nowe sytuacje zależy od modelu i danych.

It learns links between observations, instructions and movements from task examples; transfer to new situations depends on the model and data.

Everyday example

Prosisz robota, żeby odłożył kubek na półkę; model łączy obraz stołu z poleceniem i proponuje kolejne ruchy ramienia.

You ask a robot to put a cup on a shelf; the model combines the table image with your instruction and proposes arm movements.

This concerns you if you…

Examples

Subtopics

Related topics

Sources