Comment j'ai créé des vidéos d'IA époustouflantes localement, gratuitement, hors ligne et sans aucune censure

TL;DR (pour les créatifs impatients)

• Frame Pack est un générateur de vidéos d'IA hors ligne, gratuit et open-source, qui fonctionne sur la plupart des GPU grand public.
• Vous pouvez générer des vidéos de 1 à 2 minutes à partir d'une seule image et d'une courte invite.
• Il fonctionne sous Windows, nécessite un GPU NVIDIA avec plus de 6 Go de VRAM et est livré avec un programme d'installation en un clic.
• Pas de censure, pas de frais de cloud, et un résultat étonnamment bon. 

Je vais vous montrer :

• Les meilleurs résultats vidéo que j'ai obtenus avec ce logiciel (avec des liens et des exemples).
• Comment l'installer, l'optimiser et écrire des invites adaptées.

Entrons dans le vif du sujet.

D'abord, regardez ceci :

 

Tout cela a été fait hors ligne. Sur mon ordinateur. À partir d'une seule image et d'une seule phrase.

Les résultats sont tellement remarquables qu'on ne pourrait jamais deviner qu'ils ne proviennent pas d'un studio d'animation professionnel.

Pourquoi Frame Pack change-t-il la donne ?

Frame Pack est un outil open-source qui vous permet de :

• Animer n'importe quelle image en une vidéo complète et cohérente.
• Fonctionner entièrement hors ligne, en utilisant uniquement votre GPU et l'interface Gradio de votre navigateur.
• Contourner les limitations du cloud (pas de paywalls, pas de censure).
• Personnalisez la longueur, le style, le mouvement et la fidélité de la vidéo.

Et le plus intéressant ?

Frame Pack ne nécessite que 6 Go de VRAM. Cela correspond à la capacité d'un ordinateur portable.

Le modèle original sur lequel il est basé, le HunYuan de Tencent, nécessitait 60 à 80 Go. Les créateurs de Frame Pack ont réalisé des prouesses techniques pour comprimer cette capacité dans un outil utilisable par tous. 

Ce qu'il peut faire (et ce qui lui pose problème)

Il est excellent pour.. :

•  Séquences de danse en douceur
• Kung fu / flux d'arts martiaux
• Animations 3D de type Pixar
• Personnages d'animation avec expressions faciales
• Démarches réalistes pour l'écran
• Animations de style peinture avec fumée animée, arrière-plan, etc.

Le logiciel a encore des difficultés avec :

• les mouvements hyperdétaillés des mains et des doigts (bien que les paramètres de basculement puissent aider)
• Les expressions faciales extrêmes (pleurs, cris, etc.)
• Action ultra-rapide (comme la boxe hyperréaliste, possible, mais floue)

Conseil de pro : Précisez toujours clairement les mouvements dans votre message. Des mots tels que « mouvements rapides », « gracieux » ou « action intense » font une énorme différence.

Comment installer Frame Pack sur votre PC, Guide complet étape par étape

Commençons par la mise en route

Étape 1 : Configuration requise

• OS : Windows 10 ou 11 ou Linux (mais nous allons nous concentrer sur Windows dans cet article)
• GPU : NVIDIA avec au moins 6 Go de VRAM
• RAM : 16 GB recommandé
• Espace disque : ~40 GB requis 

Étape 2 : Télécharger Frame Pack

1. Allez sur le repo officiel de GitHub (n'utilisez pas de sites imitateurs !) : Frame Pack GitHub - Official
2. Téléchargez le programme d'installation en un clic 7z (~1.7 GB). >>> Cliquez ici pour télécharger le package One-Click (CUDA 12.6 + Pytorch 2.6) <<<
3. Extrayez-le dans le dossier de votre choix. 
4. Double-cliquez sur run.bat et attendez que les poids du modèle s'installent (~30GB).

Premier lancement :

• La première fois que vous l'exécutez, le logiciel télécharge tous les modèles et dépendances nécessaires.
• Soyez patient, cela prend du temps mais cela ne se produit que lors du premier démarrage.
• Vous obtiendrez une interface locale de Gradio qui s'ouvrira dans votre navigateur.
  

Accélérer avec Flash Attention (facultatif mais puissant)

Vous voulez des rendus plus rapides ?

1. Allez dans le dossier system/python à l'intérieur de votre framepack.
2. Ouvrez un terminal (tapez cmd dans la barre de dossier).
3. Vérifiez les versions de Python, PyTorch et CUDA : python.exe --version python.exe -m pip list
4. Allez sur ce site avec des roues d'attention Flash pré-construites.
5.  Téléchargez la version correspondant à votre configuration.
6. Installez-la via un terminal : python.exe -m pip install « path-to-wheel.whl »
7. Et voilà, des générations plus rapides, avec une qualité irréprochable.

Aperçu de l'interface, votre AI Movie Studio

Une fois chargé, voici ce que vous verrez : 

• Uploader l'image : Votre point de départ (photo, rendu 3D, anime, etc.)
• Champ d'invite : Décrivez ce que vous voulez obtenir comme mouvement
• Durée de la vidéo : Jusqu'à 120 secondes
• Paramètres :
• Étapes : Qualité vs. vitesse (15-25 est une bonne valeur)
• Bascule TCH : Génération plus rapide vs. précision de la main/du doigt
• Échelle CFG : Respect de l'invite (par défaut = 10)
• Compression MP4 : 0 = sans perte, 16 = équilibre satisfaisant

Conseils en matière d'invites :

• Soyez précis : « L'homme marche lentement et avec assurance, de la fumée s'échappe en arrière-plan ».
• Ajoutez du rythme : « Elle tourne lentement la tête, puis sourit.
• Utilisez des indices d'action : « Les personnages se disputent rageusement, les mains gesticulent, les bouches remuent rapidement ». 

Problèmes courants (et solutions)

Problème : Les mains sont imprécises
Solution : Désactiver la bascule TCH

Problème : manque de mémoire
Solution : activer « Préserver la mémoire du GPU » et réduire la durée de la vidéo

Problème : Pas de mouvement
Solution : Soyez plus clair dans votre message, spécifiez chaque mouvement

Conclusions : L'avenir de la vidéo IA

Ce que Stable Diffusion a fait pour l'art, Frame Pack le fait pour les séquences cinématographiques.

Le fait qu'il fonctionne hors ligne, sans cloud et sur du matériel grand public constitue une avancée considérable pour les créateurs indépendants, les animateurs, les cinéastes et les conteurs.

Vous n'êtes plus limité par votre budget. Vous n'êtes limité que par votre imagination.

source :

https://ai.plainenglish.io/how-i-created-stunning-ai-videos-locally-free-offline-and-uncensored-4bda799dfde1#bypass