Generowanie ruchu postaci z opisu tekstowego

Text-to-motion generation · id textmotion · aliases: text-to-motion generation, text-conditioned motion generation, generowanie ruchu z tekstu, generowanie ruchu warunkowane tekstem

Modele generatywne, najczęściej dyfuzyjne transformery, tworzące sekwencje póz szkieletu warunkowane tekstem, etykietą akcji lub innymi sygnałami.

Generative models, most often diffusion transformers, producing skeleton pose sequences conditioned on text, an action label or other signals.

In one sentence

Wpisujesz zdanie w rodzaju „osoba podskakuje i macha ręką”, a model tworzy animację ruchu całego ciała.

You type a sentence like 'a person hops and waves', and a model creates an animation of full-body movement.

Problem it solves

Nagrywanie aktora w studiu ruchu dla każdej drobnej czynności jest drogie, a małe zespoły nie mają do niego dostępu.

Recording an actor in a motion studio for every small action is costly, and small teams cannot access one.

What it does

Jak szkic choreografa: z opisu powstaje pierwszy ruch, który animator może potem poprawić albo przerobić.

Like a choreographer's sketch: a first movement emerges from the description, which an animator can then refine or rework.

Everyday example

Twórca niezależnej gry wpisuje „strażnik ziewa i przeciąga się” i dostaje gotowy klip dla postaci w tle.

An indie game maker types 'a guard yawns and stretches' and gets a ready clip for a background character.

This concerns you if you…

Related topics

Sources