Lumiere : la nouvelle IA de Google qui génère des vidéos réalistes
Si la génération d’images à partir de texte progresse à vitesse grand V, la génération de vidéos n’est pas en reste. Google a récemment présenté Lumiere, un modèle permettant de créer de toute pièce des vidéos de 5 secondes au format 1024×1024. Un site présentant ce projet de recherche a été mis en ligne, en plus d’une petite vidéo de démo.
La technologie de Google repose sur un modèle d’IA baptisée Space-Time-U-Net (STUNet) pouvant comprendre où se situent les éléments d’une vidéo et comment ceux-ci se déplacent et changent. Elle peut donc générer une première image avant de créer des mouvements en se basant sur les lieux approximatifs où se dirigent les éléments. Sa spécificité est de pouvoir générer une vidéo complète (du début à la fin) en une seule fois.
Bien que l’aspect artificiel reste présent, le résultat est globalement bluffant. La technologie peut également servir à animer une image préexistante, mais aussi à créer des vidéos en se basant sur le style d’une image. On peut modifier le style de certains éléments d’une vidéo, ou encore « remplir » une partie vide. Les exemples présentés se concentrent sur des animaux, plus facilement crédibles en évitant la vallée de l’étrange.
Les différents exemples montrent un outil qui pourra être utilisable dans différents secteurs, par exemple pour générer des effets spéciaux. Google s’inquiète logiquement des risques de proposer un tel outil publiquement, notant qu’il « existe un risque d'utilisation abusive pour créer des contenus faux ou nuisibles » avec la technologie.
Ce type de technologie n’est pas nouvelle : Meta dispose depuis 2022 d’un générateur appelé « Make-A-Video », tandis que certaines plateformes créent des présentations pour entreprises avec de telles technologies. La sortie en novembre dernier de Stable Video Diffusion avait fait du bruit dans le secteur avec ses résultats cohérents, mais le modèle de Google va encore plus loin : il génère 80 images, contre seulement 25 pour son concurrent.
Google ne s’est pas particulièrement illustré dans le domaine de la génération d’images jusqu'à présent. Son IA Imagen devrait bientôt arriver sur Bard, et les projecteurs sont pour le moment plutôt pointés sur Midjourney ou l’impressionnant DALL-E 3. Lumiere n’est pas disponible en test pour le moment, mais on peut imaginer que la technologie sera intégrée d’une manière ou d’une autre dans un service de Google.
On attends de voir ce que donne les résultats "réel" et pas ceux cherry-picked ou booster au Pipotron comme Google sait bien le faire ces derniers temps.
Magique et flippant.
Comment savoir ce qui sera de l’IA ou du réel ?!
@iftwst
Il n’y a plus à se poser la question! Plus rien n’est réel donc on ne croira plus en rien… à part les complotistes qui eux trouveront tout ce qui les arrange.
@Seb42
Sois tranquille lapinou tu auras toujours TFCHIOTTE et BFM WC pour continuer à te guider dans cette matrice que tu chéris tant.
Et qui sait, reste à l’écoute ils vont peut être bientôt annoncer la 15eme dose pour pouvoir continuer d’aller au restaurant 🤞🏻.
Sois fort 💪🏻
@volcomito
😂 le hors sujet tu maitrises pas mal, tu sais que tu ne réponds en rien à la problématique mais bon vu la tournure de ton commentaire, pas sûr que ce soit pertinent de s’entretenir avec toi.
Allez soit fort dans ton délire pour reprendre ton expression 😘🐇
@iftwst
Qui s’interroge sur la nature de la réalité en explorant la physique et/ou la spiritualité pourra voir dans le raz-de-marée de l’IA le déploiement d’un nouveau bébé dans le système de poupée russe dans lequel nous naviguons corps et âmes.
🍼🪆 en train d’écrire…
On est encore loin de la perfection. Si on ne s'attarde pas sur les détails, ça passe à peu près, mais en regardant les détails on voir quand même que quelque chose cloche.
Il y a deux ans on générait des IMAGES dans une qualité dégueulasse, il y a un an on se plaignait du nombre de doigts, il y a 6 mois c'était le texte qui posait problème. Et là on en est à générer des vidéos...
@v1nce29
C’est bien, et ? Mon commentaire reste vrai, non ?
Totalement. Et ce qui serait intéressant, c'est de voir non pas un résultat bien trié et monté, mais de voir combien de boulot il a fallu pour ça.
@iftwst
Le métier de journaliste va reprendre de la valeur .
À chacun de choisir SON média de confiance
Quelle place restera-t-il, à terme, oué les créateurs de chair et d’os ? La création et la mise en ligne massive de contenus n’ont-elles pas, au final, provoqué cette montée en puissance de l’IA dans le domaine créatif ?
@sebnutt
Rien, ils vont tous mourir, ou on deviendra tous agriculteurs 🧑🌾 😆
@raoolito
En tant que paysan en reconversion je nous souhaite bien du courage 🤠
@celebration
d'un autre côté, quand nous serons tous redevenus paysans, nous aurons probablement d'autres chats à fouetter que les contenus générés par les IA 🤔
nous aurons d'ailleurs peut-etre d'autres priorités pour l'énergie / l'eau / notre temps libre (s'il nous en reste , cf Germinal), sans parler du fait qu'internet / la fibre / les réseaux sociaux / la voiture / les congés payés / les vacances / ... auront peut être vécu pour la majorité d'entre nous 😉
@appleadict
"les contenus générés par les IA 🤔 "
On ira les regarder à la télé et au cinéma allons 😂
@raoolito
Et une fois qu’on sera devenu agriculteurs, on mourra tous aussi.
@sebnutt
Ça c'est une maladie assez communes, oui
Le premier film entièrement généré par IA n'est plus très loin ! Il suffira de lui donner en prompt un scénario complet lui même généré par IA !
@powergeek
Le générique de "invasion" de Marvel a été entièrement réalisé avec du génératif
C'est un petit peu bizarre, mais artistiquement parlant, et comme conceptuelment parlant, c'est excellent
@powergeek
Le premier film entièrement en image de synthèse a déjà plus de 20 ans c’était final fantasy. Au combien à l’époque s’étaient inquiétés que l’image de synthèse remplace entièrement le cinéma classique.
Qu’en est t’il aujourd’hui ? C’est bien plus contrasté. L’imagine de synthèse est un outil qui vient en plus non en remplacement. Ça fait partie de tout un panel de techniques diverses.
Il en sera pareil de l’ia pour les artistes ce sera un outil une aide un truc en plus qui permet d’aller plus loin. Une complémentarité va s’installer et s’ancrer dans les habitudes comme quasiment toutes les technos dont tout le monde criait à la mort de plein de pans de sociétés. Il n’en est au final jamais rien c’est même plutôt l’inverse.
@cosmoboy34
Je ne suis pas d'accord avec toi. L'IA n'est pas une techno de plus que l'homme peut utiliser. Elle sera capable de se substituer à l'homme dans bien des domaines. Et surtout elle sera capable de s'améliorer elle-même pour progresser. J'aime beaucoup l'exemple d'Alpha Zero le programme d'échecs de DeepMind. On lui a juste donné les règles du jeu et après quelques millions de parties contre lui-même il est devenu imbattable. Il en sera de même pour le cinéma, la musique ou la littérature. C'est mon point de vue, pas une prophétie 😉
Tant que l'IA n'aura pas une méthode absolument imbattable pour nous aider à atténuer voir faire disparaître l'effet de serre et la pollution de l'environnement, ça servira rien!
@raoolito
Pas sur que la solution imbattable pour le climat plaise à l'humanité 😬
@Slaine
😜
Je parie aussi là dessus
@raoolito
Sa méthode sera peut-être le chômage de masse avec à terme un déplacement des populations dans les environnements ruraux et un retour à la cultivation des sols pour une auto-suffisance, les aides d’état servant à consommer les besoins en technologie.
Libérer l’humanité de son temps de travail avec un retour à des valeurs plus noble. Et pourquoi pas ? Beaucoup de cadres quittent le milieu pour un retour aux sources, phénomène qui n’existait pas il y a 30 ans. Est-on en train de vivre la fin de ce qu’on a connu jusqu’ici ?
@LvLup
Ce qui est amusant, c'est que quelque soit la méthode, on sent bien que ça ne passera pas facilement (euphémisme)
@LvLup
ca ressemble au fil conducteur de Guy-Roger Duvert dans "Virtual Revolution 2026" :
- l'humanité est occupée à jouer en ligne toute la journée
- les entreprises et les gouvernements se sont accordés sur le fait qu'occuper les gens à jouer permettait d'abaisser leur consommation (l'homme se cantonne aux besoins de base) et de lutter contre le réchauffement climatique
- la contrepartie, c'est que la population est nourrie gratuitement par les entreprises et les gouvernements
- le bénéfice, c'est que pendant que les gens jouent dans le virtuel, ils ne protestent pas, n'expriment pas de besoins, ...
- l'autre bénéfice, c'est que n'ayant pas d'activités physiques, la population se reproduit moins et est en moins bonne santé ...
@LvLup
"Beaucoup de cadres quittent le milieu pour un retour aux sources, phénomène qui n’existait pas il y a 30 ans."
Des sources ? Sur le beaucoup, notamment.
@pat3
Et qui tu penses qui va payer ce genre de sources ? Regarde autour de toi, simplement.
@LvLup
Mon doigt mouillé contre ton doigt mouillé donc ?
@pat3
Tu mets ton doigt ou tu veux en fait, ça m’en touche une sans faire bouger l’autre
@LvLup
Monsieur cite Jacques Chirac dans le texte, je vois qu’on a ses lettres 😄
@raoolito
"Tant que l'IA n'aura pas une méthode absolument imbattable pour nous aider à atténuer voir faire disparaître l'effet de serre et la pollution de l'environnement, ça servira rien!"
éradiquer l'homme (ce virus , cf Matrix) ?
🤔
@appleadict
L'homme est un virus, Monsieur Anderson
@powergeek
Une discours qu’on entend à quasiment chaque techno disruptive….
@cosmoboy34
Quelle était la précédente techno disruptive ?
@powergeek
Internet 🤷🏼♂️
@powergeek
Ne disait on pas d’internet que ça remplacerait l’homme ? Les arguments étaient les mêmes et au final l’homme a su en tirer profit et en faire une force plutôt qu’une fin. Il y aura des lois des législations qui permettront de remettre l’homme au centre comme pour internet. Il ne faut pas sous estimer la capacité de l’homme et de ses institutions à se protéger de lui même
@cosmoboy34
J’ai jamais entendu dire qu’Internet allait remplacer l’humain. Ça a certainement détruit des métiers pour en créer d’autres, comme l’informatique avant lui. Pour les robots et l’IA ça me semble différent.
@powergeek
Alors je dis pas c’est un énorme bouleversement mais ce sera pas la fin de l’humanité pour autant 😅 je pense même que c’est la meilleure chance qu’on ait de prendre les bons chemins tant l’homme a prouvé de très nombreuses fois son incapacité à regarder les choses avec sincérité et abnégation. Un acteur tel que l’ia qui peut regarder et régler les problèmes de nos sociétés sans influence émotionnelle ou extérieure avec une maîtrise complète des tenants aboutissants et conséquences c’est très certainement ce qui pourra nous sortir de nos crises démocratiques
@cosmoboy34
"Un acteur tel que l’ia qui peut regarder et régler les problèmes de nos sociétés sans influence émotionnelle ou extérieure avec une maîtrise complète des tenants aboutissants et conséquences c’est très certainement ce qui pourra nous sortir de nos crises démocratiques"
je me demande si on ne trouvera pas alors que c'est le pire système dictatorial qu'on aura connu, qui agit sans la moindre humanité, sans la moindre compassion, sans la moindre considération pour les souffrances qu'il inflige
@appleadict
On peut mette des gardes fous mais c’est vrais que nos sociétés sont déjà tellement équitable dénuées d’intérêt personnels et tellement vertueuses…. Faudrait surtout pas changer ça 😅
@cosmoboy34
pas faux.
mais on a encore le droit de manifester sans se faire descendre ... 🙄🙄🙄... quoi que ...
@appleadict
Et ? Je vois pas pk ça changerait. Il s’agit pas de laisser l’ia tout diriger mais de l’utiliser pour régler des problèmes que les hommes se sont montrés inefficaces à solutionner. Et en même temps ça se comprend le monde est de plus en plus complexe on part d’un problème À avec des ramification immenses dans des domaines B C D.
Cela dit en france particulièrement le droit de manifester est depuis quelques temps un devoir demmerder très syndicalisé pour des effets quasi inexistants il serait temps de changer de méthode
@appleadict
Ce serait pas difficile de donner des taches précises sans donner les commandes comme :
Élabore un plan pour améliorer l’éducation
Ou
Élabore un programme pour rendre la santé plus efficace et améliorer la santé des gens.
Comme toujours ça dépend comment on l’utilise 😉
@cosmoboy34
"Ce serait pas difficile de donner des taches précises sans donner les commandes "
ce serait possible bien sur.
mais le problème serait alors de passer de la recommandation à la mise en oeuvre.
c'est pas comme si personne ne réfléchissait à des solutions pour éviter de se prendre le mur ... mais alors les intérêts s'en mêlent et rien ne se passe, voire même parfois c'est l'inverse qui se produit
@appleadict
Oui et c’est tout le problème. Les intérêts. Même le gouvernement le plus vertueux du monde se trouve bloqué par ces intérêts.
Justement l’ia dans un premier temps pourrait régler ce problème. Et c’est vrai qu’il y a des gens qui réfléchissent aux problèmes et même beaucoup mais quand on y regarde au final depuis des centaines d’années on vote des centaines voire des milliers de lois chaque année pour quel résultat ? Alors oui on est quand même dans une société assez équilibré mais la trajectoire qu’on observe est quand même assez sombre et tout cela avec globalement des gouvernements successif volontaires et souvent engagés peu importe le bord.
L’état serait une entreprise ce serait sûrement la plus dis fonctionnelle de toute
Juste un exemple on parle souvent de mettre de l’argent dans l’éducation etc ce qu’on sait moins c’est que la france est le sixième pays qui dépense le plus par enfant au monde !!! Et pourtant ça fonctionne pas c’est qu’il y a des problèmes profondément structurels plus que financier. Tant qu’on changera pas tout ce logiciel la rien ne changera
@appleadict
merci pour ce petit moment d’échange fort intéressant 😁
@cosmoboy34
"Un acteur tel que l’ia qui peut regarder et régler les problèmes de nos sociétés sans influence émotionnelle ou extérieure avec une maîtrise complète des tenants aboutissants et conséquences c’est très certainement ce qui pourra nous sortir de nos crises démocratiques"
La dictature peut aussi nous sortir de nos crises démocratiques. Ce que tu décris peut aussi être vu comme une techno-dictature.
Pages