Son, voix et musique
Lip sync
Aussi appelé : synchronisation labiale
Le lip sync fait correspondre les mouvements de bouche d'un personnage généré au texte prononcé sur la bande son.
Les modèles vidéo récents intègrent une génération audio native, ce qui améliore nettement la synchronisation. Reste que le français pose plus de difficultés que l'anglais, sur lequel la plupart des modèles sont majoritairement entraînés.
Une stratégie de contournement fréquente : filmer le personnage de dos ou de profil pendant les répliques longues, et réserver le face caméra aux phrases courtes.
Les phrases de moins de six mots passent presque toujours. Au-delà, la dérive commence.
Notions liées
Voix off IA
La voix off IA est une narration générée par synthèse vocale à partir d'un texte, avec choix du timbre, du débit et de l'intonation.
Vallée dérangeante
La vallée dérangeante est le malaise ressenti devant un visage presque humain mais pas tout à fait, phénomène décrit par le roboticien Masahiro Mori en 1970.
Artefact
Un artefact est un défaut produit par le modèle : main à six doigts, membre qui se dédouble, texte illisible, objet qui traverse la matière.
Les films de DelgadoWorks montrent ces choix appliqués, avec le détail de fabrication sur chaque page.
Même catégorie
Son, voix et musique
Mixage
Le mixage équilibre les niveaux entre voix, musique et effets pour obtenir un son homogène et conforme aux normes de diffusion.
Musique générative
La musique générative produit une bande son originale à partir d'une description de style, d'instrumentation et d'ambiance.
Sound design
Le sound design est la construction de l'univers sonore d'un film : ambiances, bruitages, effets, spatialisation.
Voix off IA
La voix off IA est une narration générée par synthèse vocale à partir d'un texte, avec choix du timbre, du débit et de l'intonation.