Scentralizowany trening, zdecentralizowane działanie (CTDE)

Centralised training for decentralised execution (CTDE) · id marlctde · aliases: CTDE, centralized training decentralized execution, scentralizowany trening

Paradygmat kooperacyjnego MARL: w treningu dostępny jest stan globalny i dane innych agentów, a wykonanie opiera się wyłącznie na lokalnych historiach obserwacji.

A cooperative MARL paradigm: training may use global state and other agents' data, while execution relies only on local observation histories.

In one sentence

Agenci ćwiczą razem z dostępem do pełnego obrazu sytuacji, a potem każdy działa sam, widząc tylko swoje otoczenie.

Agents practise together with a full view of the situation, then each acts alone, seeing only its own surroundings.

Problem it solves

W prawdziwym świecie członkowie zespołu nie widzą wszystkiego i nie mogą się stale naradzać, a uczenie każdego osobno bywa chaotyczne.

In the real world team members cannot see everything or keep conferring, and training each of them separately is often chaotic.

What it does

Jak drużyna, która analizuje mecz z nagrania z lotu ptaka, a na boisku każdy gra według tego, co sam widzi.

Like a team that studies a match from an overhead recording, then on the pitch each player acts on what they see themselves.

Everyday example

Roboty sprzątające w biurowcu trenują w symulacji ze wspólną mapą, a po wdrożeniu każdy jeździ, korzystając tylko z własnych czujników.

Office cleaning robots train in simulation with a shared map, and once deployed each drives using only its own sensors.

This concerns you if you…

Subtopics

Related topics

Sources