Dans cet article, des méthodes pour générer des vidéos à partir d’invites de texte à l’aide de Stable Diffusion AI.

Stable Diffusion vous permet de créer des images étonnantes à partir d’invites de texte à l’aide de l’IA.

Poussons ce concept un peu plus loin et générons des vidéos à partir d’invites de texte à l’aide de Stable Diffusion.

Annonces

Utilisez la méthode avec laquelle vous êtes à l’aise et qui convient à votre cas d’utilisation.

1. Génération de vidéos Stable Diffusion AI à partir de l’interface graphique du navigateur à l’aide de Google Colab Notebook
2. Génération de vidéos Stable Diffusion AI via la ligne de commande

Examinons-les un par un.

Génération de vidéos Stable Diffusion AI à partir de l’interface graphique du navigateur à l’aide de Google Colab Notebook

1. Ouvrez Google Colab Notebook dans votre navigateur.
2. Dans la barre de menus supérieure, sélectionnez Runtime -> Run All
3. Le bloc-notes vous invitera à vous connecter à Hugging Face. Suivez les instructions qui s’y trouvent.

Génération de vidéos Stable Diffusion AI via la ligne de commande

Pour utiliser cette méthode, vous devez avoir installé Python3 ou supérieur et connaître les programmes en ligne de commande.

Annonces

1. Téléchargez le code depuis ce dépôt Github
   • Il y a deux façons de faire ça. Vous pouvez utiliser soit :
     1. Cliquez sur le bouton de code vert et appuyez sur Télécharger Zip, ou
     2. ouvrez votre application en ligne de commande (appelée Terminal sur Mac/Linux ou cmd/Powershell sur Win) et utilisez la commande : git clone git@github.com :nateraw/stable-diffusion-videos.git
   • Les deux méthodes ci-dessus téléchargeront le code sur votre machine locale. Si vous avez utilisé la méthode de téléchargement zip, vous devrez extraire l’archive avant de continuer.
2. À partir de l’application de ligne de commande, modifiez le répertoire vers le code extrait ci-dessus (cd <chemin du dossier>)
3. Installez les modules Python requis en exécutant la commande : pip install -r requirements.txt . Si cette commande génère une erreur, essayez pip3 install -r requirements.txt . Si vous voyez toujours des erreurs, vous n’êtes pas dans le bon dossier/répertoire ou vous devez installer IP ou pip3 sur votre système.
4. Exécutez la commande ci-dessous pour générer une vidéo à partir d’une invite de texte

python stable_diffusion_walk.py \
--prompts "['terre', 'mars', 'jupiter']" \
--graines 903,123,42 \
--output_dir rêves \
--name animaux_test \
--guidance_scale 8.5 \
--num_steps 5 \
--hauteur 512 \
--largeur 512 \
--num_inference_steps 50 \
--scheduler klms \
--disable_tqdm \
--faire une vidéo \
--use_lerp_for_text \
--do_loop

remplacez les invites données par les vôtres. Jouez avec les paramètres pour voir ce que vous pouvez générer.