Bastien Cocquempot Technical Artist VFX / IA
Tous les projets
IA générative · ComfyUI

Character Animation & Lip Sync

Un pipeline d’animation faciale synchronisée sur une piste audio.

Voir la vidéo sur Vimeo
Type
IA générative
Année
2026
Outils
ComfyUI, Flux.2, LTX 2.3

Le projet

L’objectif : développer un pipeline d’animation faciale synchronisée sur une piste audio, avec un lip sync naturel et expressif qui préserve la haute fidélité visuelle du personnage.

Workflow de synchronisation

  1. 01Character designCréation du visage et de l’environnement avec Flux.2, pour obtenir une base photoréaliste.
  2. 02Animation vidéoLTX 2.3 génère les micro-mouvements qui rendent la séquence naturelle.
  3. 03Animation pilotée par l’audioUn workflow de lip sync sous ComfyUI, basé sur LTX 2.3 : la piste sonore pilote les mouvements de la bouche et les expressions du visage.

Points clés

  • Réalisme des phonèmesLes mouvements des lèvres sont calés avec précision sur l’audio fourni.
  • Conservation de l’identitéLe visage du personnage reste cohérent pendant toute l’animation.

Outils et compétences

  • ComfyUI
  • Flux.2
  • LTX 2.3
  • Entrée audio
Portrait d’une jeune femme blonde dans un intérieur
Un homme âgé au chapeau, cigarette à la main
Projet suivant Neural Rendering