Générer une vidéo sur un simple PC : c’est la nouvelle merveille de Stable Diffusion

 

Après l'image, Stability.ai présente Stable Video Diffusion : une IA générative capable de produire une vidéo directement depuis votre PC, sans passer par le cloud.

 

On parle beaucoup de ChatGPT, Dall-E ou Midjourney, qui sont de très impressionnants outils d’IA générative déjà très utilisés dans l’industrie. Le problème, c’est qu’ils demandent tous une énorme puissance de calcul dans le cloud. Ce n’est pas le cas de Stable Diffusion, qui peut tourner localement sur votre machine pour créer des images, et désormais, des vidéos.

La société Stability AI a, en effet, annoncé un nouveau modèle open source : Stable Video Diffusion, son premier modèle capable de générer de la vidéo.

Des vidéos de 2 secondes

Pour le moment, Stable Video Diffusion se limite à des vidéos de deux secondes en 1024 x 576 pixels, ce qui est très limité à l’ère de la 4K. Plus précisément, l’IA générative va créer 25 images cohérentes par rapport à la requête de l’utilisateur.

C’est là tout l’enjeu de ce genre de modèles face à la simple création d’images. Pour générer une vidéo, il faut réussir à générer une succession d’images cohérentes les unes par rapport aux autres avec une évolution logique d’une scène.

Pour le moment, le modèle génère une vidéo à partir d’une image, mais Stability promet déjà une version capable de générer une vidéo à partir d’une commande texte.

La force du modèle est de pouvoir tourner sur un PC personnel. Sur Github, on peut déjà lire des utilisateurs et prendre en main Stable Video Diffusion sur des PC équipés d’une GeForce RTX 4090.


Si vous voulez recevoir les meilleures actus Frandroid sur WhatsApp, rejoignez cette discussion.

Les derniers articles