Flux de travail de création vidéo animée avec Midjourney et Runway

CONSEILS POUR CRÉER DES VIDÉOS ANIMÉES AVEC MIDJOURNEY ET RUNWAY La première chose que je veux clarifier est que je ne suis pas un gourou, juste quelqu'un qui a créé deux courts métrages jusqu'à présent et qui prépare le prochain. J'ai pensé que mon expérience pourrait être utile à ceux qui débutent. Ceci n'est pas et n'a pas pour but d'être un tutoriel, juste un guide avec des recommandations. CHOISISSEZ UNE BONNE IDÉE Tout commence là. Cela doit être une idée réalisable, et si possible, originale. Pour faciliter le maintien d'une cohérence visuelle (c'est fondamental), je recommande de choisir un style cinématographique (science-fiction, horreur, comic, etc.) ou le style d'un auteur, comme je l'ai fait avec Dalí, et de l'utiliser dans le prompt pour générer les images. Pour savoir si l'idée est viable et les problèmes que vous pourriez rencontrer, vous pouvez télécharger quelques images et les tester dans Gen-2 de Runway. Si elles s'avèrent mauvaises, il est probablement préférable d'abandonner l'idée et de passer à une autre. Je suis sûr que vous savez que Runway fonctionne sur une base de crédits ('secondes'), donc à moins d'avoir un Plan Illimité, je recommande d'être très sélectif. STORYBOARD Une fois que vous avez choisi une idée réalisable, il serait bon de faire un storyboard, même mental. Essayez de visualiser l'histoire que vous voulez raconter. Peut-être que c'est une histoire qui existe déjà, comme, dans mon cas, Le Magicien d'Oz. Cela vous facilitera la tâche. Quand vous avez cela clair, commencez à générer des images dans Midjourney. Vous n'aurez aucun problème à en créer autant que vous en avez besoin. Important : les images doivent avoir un rapport hauteur/largeur de 16:9 pour être affichées en plein écran. Vous vous souvenez de ce que nous avons dit sur la cohérence visuelle ? C'est ici qu'elle entre en jeu. Choisissez des images qui maintiennent une ligne visuelle. Gardez en tête que beaucoup d'entre elles ne fonctionneront pas lors de l'animation, donc il est bon d'en avoir beaucoup pour choisir. Vous pouvez aussi en générer d'autres au fur et à mesure du montage. ANIMER LES IMAGES AVEC RUNWAY Je ne vais pas vous mentir, Gen-2 est une loterie. Peu importe à quel point vous êtes prudent et sélectif, certaines images sortiront mal : sans mouvement ou déformées par un mouvement excessif. Il n'y a pas de contrôle. Cependant, je trace quelques conclusions : - Les images de paysages tendent à bien fonctionner la plupart du temps. Cela fait en général un plan de travelling très fluide qui rend vraiment bien. - Les plans frontaux des personnages échouent beaucoup de fois. Avec Dorothy, j'ai eu de réels problèmes. Si vous voulez être sûr et que cela ne paraisse pas mauvais, il vaut mieux avoir le dos tourné. - Les yeux sont généralement les pires. Ils ont ruiné beaucoup d'animations pour moi. - Faites attention au type de composition de l'image. Si c'est un personnage sur un chemin, l'animation montrera probablement le personnage marchant en vue. Aussi, s'il y a des éléments dynamiques comme des ballons, c'est plus facile qu'il s'anime (même si cela peut devenir incontrôlable). J'ai souscrit au plan é à la carte, et c'était trop court. J'ai épuisé les crédits en deux ou trois jours, alors j'ai dû acheter plus de crédits. Si vous voulez créer une vidéo d'essai, cela fonctionnera, mais si votre idée est de créer deux ou plus de vidéos, peut-être de choisir un autre abonnement. Oui, Runway coûte cher. MONTAGE VIDÉO AVEC CAPCUT Si vous avez un peu d'expérience en montage (Flash, Edge, Animate, Avid, Premiere), cette application gratuite sera très facile à utiliser. Si vous savez ce que sont les Iam (Keyframes), c'est suffisant. Le reste, c'est explorer les effets, les transitions et choisir des pistes audio. Un bon nombre d'elles sont incluses, mais vous pouvez faire un suivi. La bande sonore est très importante quand on crée un court métrage. Quand vous voyez vos images animées au rythme de la musique, c'est comme si vous entriez dans une autre dimension. Attention aussi au choix de typographies pour les titres de crédit, qu'ils restent en adéquation avec le style visuel. Pour moi, c'est le pire de CapCut. Ce n'est pas très bien faite. Il n'y a pas une longueur prédéterminée pour un court métrage, mais j'aime qu'il fasse autour de 01:20. Si c'est trop long, il risque de perdre l'attation de l'utilisateur, qui dans les réseaux sociaux est limitée. Gardez en tête que chaque image animée vaut 4 secondes, vous aurez donc besoin de 15 images pour atteindre une minute de longueur, et 20 pour 01:20. Vous pouvez aussi utiliser une image statique pour l'intro ou la sortie finale. Voilà mes recommandations. Je suis sûr que des choses sont oubliées, mais nous pouvons les discuter dans ce post (le plus long que j'ai écrit).