Dans un article précédent , j’ai exploré comment l’IA générative comme Midjourney peut aider les créatifs à créer des moodboards et des storyboards simples. Aujourd’hui, j’aimerais vous montrer comment j’ai utilisé quelques astuces pour faire passer le storyboard avec l’IA au niveau supérieur.
L’art du storyboard par Midjourney
Il y a quelques semaines, j’ai effectué des tests pour voir comment Midjourney gère le storyboard pour le processus de pitch. L’une d’elles était une tentative de recréer des scènes d’une publicité emblématique de John Lewis sous forme d’illustration. Le défi était de recréer le même personnage, un mignon petit garçon de six ans, dans toutes les scènes. Cela a été en partie réalisé par un « piratage » impliquant l’utilisation d’une référence à un acteur populaire dans une commande textuelle, mais avec l’annonce de Midjourney qu’ils supprimeront des célébrités de leurs ensembles de données, cela pourrait ne pas fonctionner à l’avenir. J’ai donc cherché une meilleure alternative.
Un garçon aux cheveux bouclés généré avec Midjourney comme référence aux prochains cadres du storyboard
J’ai créé un personnage dans MJ pour un garçon aux cheveux bouclés qui serait le personnage principal sur tous les cadres du storyboard. En ajoutant sa photo comme référence pour les invites suivantes, j’ai essayé de les créer, mais à chaque fois MJ n’a changé que peu le personnage du garçon, incapable de le montrer en pleine silhouette ou dans des scènes et des lieux spécifiques. Il semble que la photo d’entrée ait trop d’influence sur Midjourney, qui ne supporte pas un système de pondération comme Stable Diffusion.
Inspiré par la chaîne de l’illustratrice Lavender Streg , j’ai décidé d’utiliser des images supplémentaires. En plus de l’illustration du garçon, j’ai simplement ajouté une photo d’une composition similaire que je voulais créer. Par exemple, pour la scène avec l’enfant qui s’ennuie à table, j’en ai trouvé une sur Google Images et l’ai ajoutée au début de l’invite. J’ai ensuite ajouté une description de ce que je voulais voir dans la scène. Et c’est là que la magie s’est opérée.
L’utilisation d’une photo de stock comme référence pour la composition avec l’illustration du protagoniste et une invite « esquisse de storyboard, garçon bouclé allongé dans son lit sous un drap, croquis de storyboard ennuyé, noir et blanc » a généré l’image de droite avec Midjourney
Il s’avère que l’ajout d’une deuxième image réduit le poids de la première dans la composition finale, car les deux sont pris en compte. Cela peut sembler compliqué, mais en pratique, cela se résume à un schéma simple pour créer une invite.
[url de l’image avec la composition globale] [url de l’illustration de notre protagoniste] invite décrivant ce qui se passe dans la scène <descripteurs pour souligner la forme du storyboard>
Cela rend le résultat final beaucoup plus sensible à ce que nous décrivons dans l’invite. Vous trouverez ci-dessous un exemple où il était beaucoup plus facile de montrer notre personnage sous un angle plus large dans une configuration plutôt élaborée. Quelque chose d’irréalisable avec une seule image de référence.
Utiliser un bâtiment de référence et notre héros pour créer un cadre de lui marchant dans la rue
Et c’est une tentative de recréer plus d’images du film. Dans tous les cas, j’ai utilisé une photo d’archive, pas le cadre réel comme référence de composition. Je suis très content de la cohérence, du rendu de notre personnage et de la composition. Le tout m’a pris environ 20 à 30 minutes, y compris la recherche de cadres de référence sur Google Images.
Images du storyboard de la publicité recréées dans Midjourney avec notre personnage « curly boy »
Fiches personnages et émotions
Une autre astuce que vous pouvez utiliser pour créer des caractères cohérents est quelque chose appelé feuille d’expression et feuille de personnage. Ceux-ci sont souvent utilisés dans la création d’arts conceptuels de personnages pour montrer leurs émotions, leur posture, leurs gestes, etc. Apparemment, Midjourney comprend très bien le concept de « feuille », voici quelques exemples. La clé ici est d’utiliser un rapport d’aspect personnalisé pour générer plus d’itérations des mêmes caractères dans une image. L’ajout de – q 2 vous permet de le rendre avec plus de détails, ce qui aide souvent dans ces images à plusieurs caractères. Voici les invites que j’ai utilisées pour générer ces images.
<hero image url> conception de personnage, jeune garçon heureux aux cheveux bouclés en t-shirt rayé, croquis de storyboard, feuille de conception de personnage, corps entier, ultra détaillé, stylisé, haute qualité — v 4 — uplight — q 2 — ar 2:1
Une feuille de conception de personnage avec plusieurs poses de notre protagoniste générée dans Midjourney
<hero image url> jeune garçon aux cheveux bouclés en t-shirt rayé, croquis de storyboard, noir et blanc, feuille d’expression, mignon, heureux et en colère anxieux riant embarrassé, ultra détaillé, stylisé, haute qualité — v 4 — uplight — q 2
Une feuille d’expression avec différentes expressions de notre personnage héros générée dans Midjourney
Où aller en partant d’ici?
Pouvoir reproduire des personnages de storyboard cohérents dans différentes situations, à condition de trouver une bonne photo de référence, ouvre de nombreuses possibilités. Cette technique nous permet non seulement de créer presque n’importe quel type de storyboard, mais aussi des bandes dessinées, des illustrations de livres, etc. Avec Midjourney v5 à l’horizon qui est censé nous donner encore plus de contrôle et de cohérence dans la création de personnages, y compris les modèles 3D, il semble comme l’IA est susceptible de rester et de devenir un outil important dans l’art du storyboard et de la création de personnages.
Si vous avez apprécié cet article, n’oubliez pas de consulter le précédent sur Storyboarding. Suivez-moi ici sur Medium pour plus d’histoires sur l’IA dans la publicité créative
