Częściowa obserwowalność (POMDP)

Partially observable MDPs (POMDP) · id pomdp · aliases: POMDP, partial observability, partially observable Markov decision process, częściowo obserwowalny proces decyzyjny Markowa, belief state, stan przekonań

Podejmowanie decyzji, gdy obserwacja nie ujawnia pełnego stanu świata, więc agent musi łączyć informacje z historii, np. przez stan przekonań lub pamięć sieci.

Decision-making when observations do not reveal the full state of the world, so the agent must combine information over time, e.g. through a belief state or network memory.

In one sentence

To podejmowanie decyzji, gdy widzisz tylko część sytuacji i musisz się domyślać reszty.

This is making decisions when you see only part of the situation and have to infer the rest.

Problem it solves

To, co widzisz w danej chwili, nie wystarcza, by wiedzieć, gdzie naprawdę jesteś i co się stanie.

What you see at a given moment is not enough to know where you really are or what will happen next.

What it does

Jak w ciemnym pokoju: zapamiętujesz, czego już dotknąłeś, i z tych wskazówek budujesz przypuszczenie, gdzie stoisz.

Like in a dark room: you remember what you have already touched and build a guess of where you stand from those clues.

Everyday example

Pies szukający piłki za kanapą pamięta, gdzie ją ostatnio widział, chociaż teraz jej nie widzi.

A dog looking for a ball behind the sofa remembers where it last saw it, even though it cannot see it now.

This concerns you if you…

Examples

Related topics

Sources