Ouvrir le menu principal

MacGeneration

Recherche

Lumiere : la nouvelle IA de Google qui génère des vidéos réalistes

Félix Cattafesta

lundi 29 janvier 2024 à 13:30 • 85

Ailleurs

Si la génération d’images à partir de texte progresse à vitesse grand V, la génération de vidéos n’est pas en reste. Google a récemment présenté Lumiere, un modèle permettant de créer de toute pièce des vidéos de 5 secondes au format 1024×1024. Un site présentant ce projet de recherche a été mis en ligne, en plus d’une petite vidéo de démo.

La technologie de Google repose sur un modèle d’IA baptisée Space-Time-U-Net (STUNet) pouvant comprendre où se situent les éléments d’une vidéo et comment ceux-ci se déplacent et changent. Elle peut donc générer une première image avant de créer des mouvements en se basant sur les lieux approximatifs où se dirigent les éléments. Sa spécificité est de pouvoir générer une vidéo complète (du début à la fin) en une seule fois.

Génération d’une vidéo à partir de texte.

Bien que l’aspect artificiel reste présent, le résultat est globalement bluffant. La technologie peut également servir à animer une image préexistante, mais aussi à créer des vidéos en se basant sur le style d’une image. On peut modifier le style de certains éléments d’une vidéo, ou encore « remplir » une partie vide. Les exemples présentés se concentrent sur des animaux, plus facilement crédibles en évitant la vallée de l’étrange.

Génération de vidéo à partir du style d’une image avec Lumière. Image : Google.

Les différents exemples montrent un outil qui pourra être utilisable dans différents secteurs, par exemple pour générer des effets spéciaux. Google s’inquiète logiquement des risques de proposer un tel outil publiquement, notant qu’il « existe un risque d'utilisation abusive pour créer des contenus faux ou nuisibles » avec la technologie.

In-Painting d’une vidéo avec Lumière. Image : Google.

Ce type de technologie n’est pas nouvelle : Meta dispose depuis 2022 d’un générateur appelé « Make-A-Video », tandis que certaines plateformes créent des présentations pour entreprises avec de telles technologies. La sortie en novembre dernier de Stable Video Diffusion avait fait du bruit dans le secteur avec ses résultats cohérents, mais le modèle de Google va encore plus loin : il génère 80 images, contre seulement 25 pour son concurrent.

Stylisation d’une vidéo avec Lumière. Image : Google.

Google ne s’est pas particulièrement illustré dans le domaine de la génération d’images jusqu'à présent. Son IA Imagen devrait bientôt arriver sur Bard, et les projecteurs sont pour le moment plutôt pointés sur Midjourney ou l’impressionnant DALL-E 3. Lumiere n’est pas disponible en test pour le moment, mais on peut imaginer que la technologie sera intégrée d’une manière ou d’une autre dans un service de Google.

Rejoignez le Club iGen

Soutenez le travail d'une rédaction indépendante.

Rejoignez la plus grande communauté Apple francophone !

S'abonner

SFR Box 10+ : la première box Wi-Fi 7 de SFR proposée en avant-première à certains abonnés

11:49

• 7


"Apple : les 50 premières années", le livre de David Pogue

11:06

• 8


Panther Lake, la prochaine génération Intel, déjà dans la tourmente à cause de la gravure en 18A

11:00

• 5


Grok Imagine : le chatbot d’Elon Musk gagne un mode -18… qui peut générer des deepfakes de célébrités

10:30

• 23


Microsoft Office 2021 pour Mac : un atout productivité imbattable à seulement 49,99 € 📍

09:48

• 0


WWDC 2025 : des avancées qui vont faire le bonheur des gestionnaires de parcs Apple

09:05

• 31


uBlock Origin Lite est désormais disponible pour Safari, sur le Mac, l’iPhone et l’iPad

08:10

• 62


macOS 15.7 RC : Apple finalise déjà une importante mise à jour de sécurité

07:15

• 5


L'Apple Watch Ultra 3 aurait un écran plus grand

06:00

• 71


Les nouvelles icônes de macOS Tahoe continuent de créer la polémique 🆕

05/08/2025 à 21:39

• 132


Nouvelle icône AirDrop, réglage pour l’Appareil Photo : les nouveautés d’iOS 26 bêta 5

05/08/2025 à 21:31

• 35


GPT-OSS : OpenAI publie un nouveau modèle open source qui peut tourner localement sur votre Mac

05/08/2025 à 20:21

• 35


La bêta 5 est disponible pour iOS 26, iPadOS 26, macOS 26, watchOS 26...

05/08/2025 à 19:30

• 63


Des Crocs aux couleurs de Windows XP pour les 50 ans de Microsoft

05/08/2025 à 17:40

• 22


Le Beelink Mate mini se décline pour le Mac Studio : 80 Gb/s et deux SSD pour ajouter 16 To de stockage

05/08/2025 à 16:30

• 9


Alors que GPT-5 ne devrait plus tarder, OpenAI revoit certaines règles de ChatGPT

05/08/2025 à 15:40

• 41