# Agenci ogólni grający w wiele gier

EN: **Generalist game agents** · id `generalistgameagents` · aliases: generalist game agents, instructable game agents, agenci wielogrowi, agenci sterowani poleceniami w grach, SIMA, multi-game agents, gaming companions

Path: [AI Atlas](https://aiatlasgraph.com/llms.txt) › [AI w grach](https://aiatlasgraph.com/t/gameai.md) › [Agenci grający w gry](https://aiatlasgraph.com/t/gameplaying.md) › Agenci ogólni grający w wiele gier

## Description

- PL: Agenci przyjmujący obraz ekranu i polecenia językowe, a działający klawiaturą i myszą w wielu grach 3D, często z modelem językowo-wizyjnym jako rdzeniem.
- EN: Agents that take screen images and language instructions and act via keyboard and mouse across many 3D games, often built around a vision-language model.

## In one sentence

- PL: Jeden program, który patrzy na ekran jak człowiek, steruje klawiaturą i myszką i wykonuje słowne polecenia w wielu różnych grach.
- EN: One program that watches the screen like a person, uses keyboard and mouse, and follows spoken instructions across many different games.

## Problem it solves

- PL: Każdy dotychczasowy agent umiał tylko jedną grę i wymagał dostępu do jej wnętrza, więc do nowej gry trzeba było zaczynać od zera.
- EN: Earlier agents mastered only one game and needed access to its internals, so every new game meant starting from scratch.

## What it does

- PL: Jak kolega, któremu podajesz pada i mówisz „zbierz drewno i zbuduj szałas”: rozgląda się, rozumie polecenie i sam kombinuje.
- EN: Like a friend you hand the controller to and say 'gather wood and build a shelter': they look around, get it and figure it out.

## Everyday example

- PL: Mówisz towarzyszowi w grze survivalowej, żeby poszedł do czerwonego domu i przyniósł drewno, a on to robi, choć nigdy wcześniej nie widział tej gry.
- EN: You tell a companion in a survival game to go to the red house and fetch wood, and it does, though it has never seen that game before.

## This concerns you if you…

- PL: chcesz grać z AI jako partnerem w drużynie
- PL: interesujesz się agentami działającymi w 3D
- EN: want to play with AI as a teammate
- EN: are interested in agents acting in 3D worlds

## Keywords

SIMA · SIMA 2 · Voyager · MineDojo · Video PreTraining · Cradle · instruction following · vision-language-action

## How it works

- PL: Agent widzi tylko piksele i dostaje polecenie tekstowe, a odpowiada akcjami klawiatury i myszy, jak człowiek. Uczy się na nagraniach ludzi z opisami słownymi, a model językowy rozkłada cel na kroki. Nowsze wersje doskonalą się, grając samodzielnie z zadaniami i nagrodą szacowaną przez model.
- EN: The agent sees only pixels and a text instruction and answers with keyboard and mouse actions, like a person. It learns from human recordings with language labels, and a language model breaks goals into steps. Newer versions improve by self-directed play with tasks and rewards estimated by a model.

## Limits

- PL: Agenci gubią się w długich, wieloetapowych zadaniach i mają krótką pamięć. Precyzyjne sterowanie myszą i rozumienie złożonych scen 3D pozostają trudne. Takie systemy są drogie i dostępne głównie jako zapowiedzi badawcze.
- EN: Agents get lost in long multi-step tasks and have short memory. Precise mouse control and understanding of complex 3D scenes remain hard. Such systems are costly and mostly available as research previews.

## Key terms

- PL: **interfejs ludzki**: Agent gra przez ekran i klawiaturę, bez dostępu do kodu gry.
- PL: **osadzenie języka**: Wiązanie słów polecenia z tym, co widać i co można zrobić.
- EN: **human-like interface**: The agent plays via screen and keyboard, without access to game code.
- EN: **language grounding**: Linking instruction words to what is visible and what can be done.

## Know first

- [Modele wizja–język–akcja (VLA) (Vision-language-action models (VLA))](https://aiatlasgraph.com/t/vla.md)
- [Klonowanie zachowań (behavioral cloning) (Behavioural cloning)](https://aiatlasgraph.com/t/behaviorcloning.md)

## Related topics

Untyped, symmetric "see also" links.

- [Modele wizja–język–akcja (VLA) (Vision-language-action models (VLA))](https://aiatlasgraph.com/t/vla.md)

## Sources

- [Scaling Instructable Agents Across Many Simulated Worlds](<https://arxiv.org/abs/2404.10179>) `sima-team-2024` · by SIMA Team (Google DeepMind) · sponsored
- [SIMA 2: An agent that plays, reasons and learns with you in virtual 3D worlds](<https://deepmind.google/blog/sima-2-an-agent-that-plays-reasons-and-learns-with-you-in-virtual-3d-worlds/>) `deepmind-sima2-2025` · by Google DeepMind · sponsored

---

AI Atlas revision 124 (2026-10-31) · HTML: https://aiatlasgraph.com/t/generalistgameagents · index: https://aiatlasgraph.com/llms.txt · everything: https://aiatlasgraph.com/llms-full.txt · updated 2026-10-30