Ouvrir le menu principal

MacGeneration

Recherche

Google Brain reconstitue les images pixellisées comme dans les séries TV

Mickaël Bazoge

mercredi 08 février 2017 à 07:01 • 30

Ailleurs

Les experts des séries TV ont bien de la chance : même s'ils vivent à notre époque, ils bénéficient d'une technologie révolutionnaire qui leur permet de transformer une bouillie de pixels en photo propre et nette désignant généralement le coupable ou un témoin très important. Cela donne quelque chose comme ça :

Les prodiges de l'intelligence artificielle permettent néanmoins de nous approcher de plus en plus des résultats obtenus dans les séries et les films de SF. Google Brain, une des expérimentations en intelligence artificielle d'Alphabet, peut ainsi « améliorer » une image très pixellisée de façon assez convaincante. Voici quelques exemples :

Dans la colonne de gauche, des photos de 8 pixels sur 8. Au centre, l'image 32 x 32 reconstituée par Google Brain. À droite, les images d'origine : le logiciel n'est pas si éloigné de la réalité — Cliquer pour agrandir

Comment ce miracle est-il possible ? S'il est évidemment impossible de créer de la matière à partir de rien, Google Brain exploite deux réseaux neuronaux pour s'approcher de la vérité. Le premier (« conditioning network ») compare les images 8 x 8 avec des photos en haute résolution qu'il réduit à 64 pixels.

Le second réseau (« prior network ») « ajoute » à l'image 8 x 8 des détails en haute résolution, en piochant dans un grand volume d'images HD. Quand l'image source est agrandie, ce réseau y intègre de nouveaux pixels qui correspondent autant que possible à ce que l'image peut représenter. Un exemple : il est probable qu'un pixel marron en haut de l'image soit un sourcil. Quand celle-ci est agrandie, le prior network comble le vide en piochant parmi les sourcils marron de sa collection.

L'image finale est le fruit de la cogitation de ces deux réseaux. Le résultat, c'est une représentation « plausible » de la personne ou de la scène dans la meilleure définition possible, en partant d'une image où les détails sont pratiquement inexistants. Une technique qui donne des rendus parfois étonnants :

Dans la colonne de gauche, les images à reconstituer. Les colonnes suivantes présentent des variations dans les résultats — Cliquer pour agrandir
Dans la colonne de gauche, les images source. La quatrième colonne présente les images d'origine. Dans les autres colonnes, des variations (la colonne NN affiche les images HD les plus proches des sources) — Cliquer pour agrandir

Il faut garder à l'esprit que les images en haute résolution ne sont pas réelles. Elles tentent simplement de « deviner » l'image réelle. D'ailleurs, dans le jargon on appelle les détails ajoutés numériquement des « hallucinations ». Les services de police et de justice qui seraient tentés d'appliquer cette technique doivent avoir cette prévention bien en tête : les images créées par Google Brain ne sont que des représentations numériques, et pas la réalité. Pas encore, du moins.

Source :

Ajouter ce site dans Google News

Nokia annonce l’abandon immédiat de RapidAPI pour Mac (ex Paw)

17:46

• 4


Les coques Apple pour iPhone 18 Pro (Max) déjà en promo chez Amazon

17:37

• 2


Revue des tests des iPhone 18 Pro : la photo de nuit progresse, l’ouverture variable divise

16:30

• 29


Les Xserve de l’IA : Apple envisagerait des serveurs M8 Ultra pour les entreprises

16:17

• 11


Réseaux sociaux : l’Union européenne prépare des restrictions pour les moins de 15 ans

14:36

• 87


Apple Watch : la Series 12 met fin à la brillante finition noir de jais

12:59

• 39


Le nouveau Siri peut-il enfin tenir la promesse de ses créateurs ?

12:51

• 44


Aqara lance le FP400, le successeur Matter et Thread du détecteur de présence FP2

12:44

• 16


Des employés et ex-employés d’Apple appellent à manifester pour le lancement de l’iPhone Duo

12:32

• 0


C&C France, l’un des principaux revendeurs Apple, placé en redressement judiciaire

11:50

• 40


Alerte nostalgie : AppZapper fait un retour spectaculaire pour supprimer les apps

10:54

• 39


Apple lie le trousseau à l'enclave sécurisée avec macOS Tahoe, et empêche sa copie d'un Mac à un autre 🆕

10:41

• 8


Google autorise finalement ses développeurs à coder avec Claude

10:19

• 3


Le dernier iMac Intel 21,5 pouces rejoint la liste des produits anciens d’Apple

09:31

• 11


Vous avez surtout retenu l’animation d’ouverture de l’iPhone Duo ? Vous pouvez la reproduire sur votre Mac

08:28

• 25


Pause de l'IA : Meta et Mistral refusent de jouer le jeu d'OpenAI et d'Anthropic

06:38

• 37