Planowanie przez wyobrażone przyszłe stany

Planning with imagined future observations · id agima · aliases: agentic imagination, visual imagination for agents, planning over imagined futures, planowanie przez wyobrażone stany, wyobrażanie skutków działań przez agenta

Technika łącząca politykę i model świata, która generuje wizualne następstwa hipotetycznych akcji i wybiera plan przez porównanie przyszłych stanów.

A technique combining policy and world model that generates visual consequences of hypothetical actions and selects a plan by comparing future states.

In one sentence

Agent przed działaniem generuje obrazy możliwych przyszłych stanów i na ich podstawie decyduje, co wykonać naprawdę.

Before acting, the agent generates images of possible future states and uses them to decide what to execute for real.

Problem it solves

W zadaniach z rzadkim feedbackiem lub nieodwracalnymi ruchami agent popełnia błędy, których skutków nie przewidział.

In tasks with sparse feedback or irreversible moves, the agent makes mistakes whose consequences it did not foresee.

What it does

Jeden model proponuje akcje, generuje ich wizualne skutki i rozumuje nad wyobrażonymi przyszłościami, żeby wybrać lepszy plan przed wykonaniem.

One model proposes actions, generates their visual outcomes and reasons over imagined futures to choose a better plan before execution.

Everyday example

W grze układania pudełek agent wyobraża sobie, że przesunięcie jednego zablokuje inne, i wybiera inny ruch, zanim zepsuje układankę.

In a box-pushing puzzle the agent imagines that moving one box blocks others and chooses a different move before ruining the puzzle.

This concerns you if you…

Related topics

Sources