Animer un storyboard en vidéo IA à partir de ses cases

0:00Dans le pipeline du cours précédent, le modèle vidéo part des actions écrites et des fiches.

0:04Il comprend la scène par le texte. Mais parfois, votre mise en scène est très précise et vous voulez que la vidéo suive exactement vos cases.

0:12La place de chaque personnage, l 'angle de chaque plan, la composition.

0:15L 'objectif de ce cours, produire la vidéo d 'une scène directement à partir de ses cases de storyboard avec le pipeline vignette storyboard vers VBO.

0:24On prend la scène 1 de The Seam, la pleine de tissu.

0:27Elle dure près d 'une minute, bien plus qu 'une seule génération vidéo.

0:30On va donc en produire un passage, les deux premiers plans.

0:33S1, le très grand plan d 'ensemble de la pleine avec le Stitcher minuscule dans un coin.

0:38Et S2, l 'insert sur ses mains qui poussent l 'aiguille au fil rouge à travers la déchirure.

0:43Un peu moins de 12 secondes à eux deux. Dans le groupe de production de la scène 1, ajoutez un pipeline.

0:48Première étape, choisir un pipeline. Cette fois, on prend Vignette storyboard vers vidéo.

0:53Sa description dit ce qu 'il fait. Il assemble les vignettes storyboard générées de la scène en une grille au trait, puis génère un clip à partir de cette grille, de l 'action des plans et des fiches production.

1:03Et il nécessite des vignettes storyboard générées.

1:06Autrement dit, les cases doivent exister.

1:08Suivant. Deuxième étape, choisir les plans.

1:10On sélectionne S1 et S2. La durée sélectionnée affiche un peu moins de 12 secondes.

1:16Ce pipeline accepte un nombre limité de cases dans sa grille.

1:19Si vous encochez trop, Screenweaver vous demande de répartir la scène sur deux pipelines.

1:23Et si un plan sélectionné n 'a pas encore de cases, Screenweaver vous le signale.

1:27Avec la mention, pas encore de vignettes storyboard.

1:30Vous pouvez quand même ajouter le pipeline et générer les cases manquantes ensuite.

1:33Mais la grille ne sera complète qu 'une fois que toutes les cases présentent.

1:37Ajoutez le pipeline. Cette fois, trois nœuds apparaissent dans le groupe de la scène.

1:41Storyboard grid, la grille. Elle assemble les cases des plans sélectionnés en une seule image, case après case, dans l 'ordre.

1:47C 'est cette image que le modèle vidéo va lire comme une planche de storyboard.

1:51Le prompt director, notre nœud LLM, il lit la grille et les actions des plans et rédige le brif de réalisation.

1:58Et scene vidéo, le générateur vidéo, qui reçoit la grille, le brif et les fiches des éléments.

2:03On génère dans l 'ordre. La grille, puis le brif, qu 'on relie, puis la vidéo.

2:08Et la vidéo suit la planche. Le très grand plan de la plaine, avec la maison au loin et le stitcher dans le coin.

2:14Exactement là où il est dans la case. Puis l 'insert sur les mains et les guilles.

2:18Le modèle a reçu la composition dessinée.

2:20Et il la respecte. Une précision importante, qui reprend ce qu 'on a vu au storyboard.

2:25La grille sert uniquement à transmettre la mise en scène.

2:28Le style de la vidéo ne vient pas de vos cases, qui sont dans le rendu neutre de la prévisualisation.

2:33Il vient des fiches de production et de la direction artistique.

2:36Vos cases grises deviennent un film de marionnettes de tissu.

2:39Alors, quel pipeline choisir ? Référence vers vidéo, quand votre scène se décrit bien avec des mots et que vous voulez laisser au modèle une certaine liberté de mise en scène.

2:47Il est aussi plus simple. Il n 'a pas besoin des cases.

2:50Vineat storyboard vers vidéo, quand la composition compte plus que tout.

2:54Un personnage minuscule dans un coin du cadre, comme S1.

2:57Une disposition précise de plusieurs personnages.

3:00Un angle inhabituel. Là, la grille donne au modèle une information que le texte transmet mal.

3:05Et dans les deux cas, gardez des passages courts.

3:07Une génération a une durée maximale et plus il y a de plans dans une seule vidéo, plus chaque plan est court et difficile à réussir.

3:142 à 4 plans par pipeline, c 'est un bon équilibre.

3:17Pour une scène longue comme la scène 1, plusieurs pipelines à la suite.

3:21Et si un plan de la scène change dans le storyboard ?

3:24Si vous re -générez une case, la grille vous signale que ces entrées ont changé.

3:28Relancez la grille, cuis le brief, cuis la vidéo.

3:31Toujours dans l 'ordre du pipeline. Alors, on récapitule.

3:35Ajoutez un pipeline. Vineat storyboard vers vidéo.

3:38Il nécessite les cases des plans choisis.

3:40Trois nœuds. Storyboard grid. Prompt director.

3:43Scene vidéo. On génère dans l 'ordre. La grille transmet la mise en scène, la direction artistique et les fiches donnent le style.

3:50Et des passages de 2 à 4 plans. Votre exercice.

3:55Prenez 2 plans de votre film dont la composition est très particulière et produisez -les avec ce pipeline.

4:00Puis faites les mêmes plans avec référence vers vidéo.

4:03Regardez lequel respecte le mieux la place de vos personnages dans le cadre.

4:07Au prochain cours, on retouche les rushs directement dans l 'app.