Ajouter des dialogues et du lip sync à une vidéo IA
Apprenez à ajouter des dialogues et de la synchronisation labiale à une vidéo IA par trois voies : répliques natives, voix séparée ou voix off. Puis dirigez une voix de synthèse comme un acteur.
Dans cette leçon, vous apprendrez
- Les trois voies du dialogue en vidéo IA : native, voix séparée et voix off
- Comment écrire une réplique native dans le prompt, avec les mots, la langue et l'intention de jeu
- Comment faire entrer un fichier de voix dans ScreenWeaver avec le bouton Ajouter une voix d'un personnage et un nœud audio
- Comment diriger une voix de synthèse avec une indication de jeu écrite
- Pourquoi la voix off est souvent la voie la plus simple et la plus cinématographique
- La règle du consentement pour cloner la voix d'une personne réelle
Les répliques parlées sont là où les films IA cassent le plus souvent : la mauvaise voix, le mauvais timing, des lèvres qui ne correspondent pas. Cette leçon couvre les trois voies du dialogue en vidéo IA et quand utiliser chacune. Le dialogue natif est généré avec l'image, la voix, le mouvement des lèvres et l'ambiance dans la même prise, comme la réplique de Thomas dans The Photo. Une voix séparée, créée d'abord avec un modèle de synthèse vocale, vous donne le contrôle de l'interprétation et du timing, et dans ScreenWeaver elle va dans un nœud audio qui peut être envoyé aux modèles vidéo qui acceptent l'audio. La voix off n'a besoin d'aucune synchronisation labiale, une idée que Lost Garden exploite avec des chevaliers sans visage et sans bouche. Vous apprenez aussi à diriger une voix de synthèse avec une indication de jeu, à garder à chaque personnage la même voix, et à respecter la règle du consentement pour le clonage vocal.
Transcription complète
Transcription de la narration en anglais.
0:04Spoken lines are where AI films break most often – the wrong voice, the wrong timing, lips that don't match. In this lecture you'll learn the three routes for dialogue, when to use each one and how to direct a synthetic voice like an actor.
0:19Route 1 – native dialogue, generated with the picture. Some video models produce the voice, the lip movement and the ambience in the same take. That's how Thomas' line in the photo was made. The words are in the prompt, in quotes, with the language and the delivery, softly. Keep native lines short, one or two sentences, and keep the speaker clearly in frame.
1:02Route 2 – a separate voice, then the picture. You generate the voice first, with a text -to -speech model, so you control the performance and the timing, then the voice drives the video. In Screenweaver, a character's story element has an Add Voice button. It creates an audio node, where you upload the voice file, and that audio can be sent as a reference to the video models that accept audio. Dedicated lip -sync tools exist, too, outside the app, for shots that need frame -perfect sync.
1:31Note that the app doesn't generate voices itself – you bring the audio file. For a short film, a text -to -speech service with voice design is usually enough. For recurring characters, save the voice settings of each one, so every scene sounds like the same person.
1:46Whichever read you choose, direct the voice like an actor. Write an acting note in words – calm, grounded, a little tired, a southern English accent. The narration of this course was generated exactly that way, from a single voice and a single acting note. Keep one voice per character for the whole film. Generate a full scene in one pass, so the time beholds, and listen for mispronounced names before you move on.
2:12For Thomas's line, the note could be quiet, almost a whisper, a man who has rehearsed this sentence for days and still isn't ready to say it. A few words of direction change everything about a line.
2:26Route 3 – voiceover, with no lips to sync at all. An inner monologue, an orator, a letter read over images. It's the easiest route, and often the most cinematic one. Lost Garden uses a version of this idea. Its nights have no faces and no mouths, so there is nothing to sync. Emotion comes from posture, light and voice.
2:54One rule with no exception – never clone a real person's voice without their written consent. And check the rules of the platform where your film will play – some require you to disclose synthetic voices.
3:09Your exercise? Pick one line of dialogue from your script and produce it two ways – native, inside the generated shot, and as a separate voice with an acting note. Compare them in the cut. In the next lecture, we'll build the full soundtrack, edit the film and export it.
La formation complète
Playlist YouTubeSection 1 · Bienvenue dans le cinéma IA
Section 2 · Écrire pour un film IA
Section 3 · Concevoir votre film
Section 4 · Liste de plans et storyboard
Section 5 · Générer le film
- 5.1Choisir le bon modèle vidéo pour chaque plan5:18
- 5.2Prompter comme un réalisateur : caméra, action, jeu5:55
- 5.3Références vers vidéo : garder personnages et décors conformes au modèle5:13
- 5.4Corriger les mauvais plans : réparer, recadrer, régénérer4:53
- 5.5Atelier, partie 1 : scénario et storyboard, pas à pas6:21
- 5.6Atelier, partie 2 : la production, pas à pas5:02