# Animacja twarzy z nagrania głosu

EN: **Audio-driven facial animation** · id `audiofacial` · aliases: audio-driven facial animation, speech-driven facial animation, animacja twarzy sterowana mową, animacja twarzy z mowy

Path: [AI Atlas](https://aiatlasgraph.com/llms.txt) › [AI w grach](https://aiatlasgraph.com/t/gameai.md) › [Animacja postaci sterowana danymi](https://aiatlasgraph.com/t/charanimation.md) › Animacja twarzy z nagrania głosu

## Description

- PL: Modele mapujące sygnał mowy na sekwencję parametrów animacji twarzy trójwymiarowej postaci, z późniejszym przeniesieniem ruchu na jej rig.
- EN: Models mapping a speech signal to a sequence of facial-animation parameters for a 3D character, followed by retargeting the motion to its rig.

## In one sentence

- PL: Model słucha mowy i tworzy zsynchronizowany ruch twarzy trójwymiarowej postaci.
- EN: A model listens to speech and creates synchronised facial motion for a 3D character.

## Problem it solves

- PL: Ręczne zgrywanie ust z tysiącami linii dialogowych, w kilku językach, pochłania miesiące pracy animatorów.
- EN: Hand-syncing lips to thousands of dialogue lines in several languages eats months of animators' work.

## What it does

- PL: Działa jak lektor dubbingu, który patrzy w ekran i dopasowuje ruch ust do słowa, tylko odwrotnie: z głosu powstaje twarz.
- EN: It works like dubbing in reverse: instead of fitting a voice to lips on screen, it builds the face from the voice.

## Everyday example

- PL: Postać w grze odpowiada ci głosem wygenerowanym na bieżąco, a jej usta i mimika pasują do każdego słowa i emocji.
- EN: A game character answers you with a voice generated on the fly, and its lips and expressions fit every word and emotion.

## This concerns you if you…

- PL: robisz grę z dużą ilością dialogów
- PL: budujesz rozmownego awatara lub asystenta głosowego z twarzą
- PL: lokalizujesz grę lub film na inne języki
- EN: make a game with lots of dialogue
- EN: build a talking avatar or voice assistant with a face
- EN: localise a game or film into other languages

## Keywords

Audio2Face-3D · FaceFormer · VOCA · blendshapes · visemes · ARKit blendshapes · wav2vec 2.0 · MetaHuman

## How it works

- PL: Nagranie jest kodowane jako cechy dźwięku. Sieć mapuje je na sekwencję parametrów twarzy, a etap retargetingu przenosi wynik na rig konkretnej postaci. System może działać w czasie rzeczywistym.
- EN: Audio is encoded into features. A network maps them to a sequence of facial parameters, and a retargeting stage transfers the result to a particular character rig. The system can run in real time.

## Limits

- PL: Trening nadal wymaga sparowanych danych dźwięku i ruchu twarzy, a zastosowanie wyniku na innej postaci wymaga retargetingu. Wdrożenie na żywo musi też zmieścić generowanie w budżecie opóźnienia aplikacji.
- EN: Training still needs paired audio and facial-motion data, and applying the result to another character requires retargeting. A live deployment must also fit generation into the application's latency budget.

## Key terms

- PL: **blendshape**: Zapisany kształt twarzy, np. uśmiech, mieszany z innymi w różnych proporcjach.
- PL: **wizem**: Wygląd ust odpowiadający grupie podobnie brzmiących głosek.
- PL: **lip sync**: Zgranie ruchu ust z wypowiadanymi słowami.
- EN: **blendshape**: A stored face shape, e.g. a smile, mixed with others in proportions.
- EN: **viseme**: The mouth shape matching a group of similar-sounding speech sounds.
- EN: **lip sync**: Matching mouth movement to the spoken words.

## Related topics

Untyped, symmetric "see also" links.

- [Postacie rozmawiające dzięki modelom językowym (LLM-driven NPCs and generative agents)](https://aiatlasgraph.com/t/llmnpc.md)

## Sources

- [Audio2Face-3D: Audio-driven Realistic Facial Animation For Digital Avatars](<https://arxiv.org/abs/2508.16401>) `nvidia-audio2face3d-2025` · by Chaeyeon Chung, Ilya Fedorov, Michael Huang, Aleksey Karmanov, Dmitry Korobchenko, Roger Ribera, Yeongho Seol

---

AI Atlas revision 122 (2026-10-30) · HTML: https://aiatlasgraph.com/t/audiofacial · index: https://aiatlasgraph.com/llms.txt · everything: https://aiatlasgraph.com/llms-full.txt · updated 2026-10-30