Fermer le menu
 

Avec Sensei, le futur de Photoshop va être étonnant

Florian Innocente | | 23:04 |  33

La conférence d'ouverture d'Adobe MAX 2017 a été l'occasion de voir ce que le futur réserve à Photoshop. Moteur de cette (r)évolution à venir, le système d'intelligence artificielle "Sensei", déjà utilisé pour certaines fonctions des logiciels existants.

Dans le cas de Photoshop, il prend la forme d'un assistant comme peuvent en avoir macOS avec Siri ou Windows avec Cortana, à ceci près qu'il est ici spécifiquement optimisé pour aider les utilisateurs de logiciels de création graphique.

Trois axes de recherches ont été montrés : l'usage de la voix et du langage naturel pour demander un coup de main à Sensei ; sa capacité à anticiper des actions et fournir des outils dont vous pourriez avoir besoin et le "creative graph", véritable journal de bord de vos travaux que l'on peut manipuler pour triturer ses images jusqu'au dernier moment.

David Nuescheler, l'un des chercheurs d'Adobe, démarre avec le croquis sommaire d'un personnage féminin dans un cadre spatial. Il sera utilisé pour créer des contenus destinés à une app sur iPad.

Tout à droite de l'interface, un gros point bleu, le symbole de Sensei peut être cliqué. Il ouvre un tiroir contextuel. Celui-ci contient un champ de requête façon Siri mais on peut utiliser la voix pour poser des questions à l'assistant.

Cliquer pour agrandir

Sans même faire cet effort, Sensei a automatiquement généré, et affiché dans cette colonne, des mots-clefs basés sur les éléments qu'il a réussi à identifier dans le croquis (femme, visage, espace, étoiles, vaisseau spatial, etc). Il montre également, par des vignettes, lesquelles de ces portions de l'image globale ont été extraites et reconnues.

Cliquer pour agrandir

Le moment d'après, Nuescheler demande à Sensei — avec la voix — de lui trouver des images relative à son croquis. Le moteur lui présente alors une photo du cosmos, puisée dans la photothèque Adobe Stock. Chaque élément ajouté au document de travail contient ce petit bouton Sensei, comme par exemple ce visuel. Un clic supplémentaire et Sensei ouvre une nouvelle interface qui offre plus de détails sur cette photographie.

Cliquer pour agrandir

À nouveau, Sensei tâche d'identifier les objets qui la composent (des étoiles, une nébuleuse, une constellation…). Chacun de ces mots clefs est isolé et peut servir de critère si l'on veut pousser plus loin ses recherches.

Cliquer pour agrandir

Ainsi, le terme étoiles est pourvu de trois curseurs (à gauche dans l'image ci-dessous) pour que Sensei trouve d'autres images où les étoiles sont plus grosses ou, au contraire, pour que leur densité soit plus importante et avec des couleurs plus (ou moins) vives. En variant le poids de ces critères, Sensei peut orienter ses recherches dans la base de données d'Adobe et affiner les résultats.

Cliquer pour agrandir
Cliquer pour agrandir

Aller à la pêche dans Adobe Stock c'est bien, mais on peut avoir aussi sa propre photothèque et besoin justement d'utiliser ses visuels pour ce travail. Lorsqu'on glisse l'une de ces photos dans le document, le bouton Sensei vient s'y coller. Un clic et à nouveau l'assistant ouvre l'interface de travail sur cet objet.

Cliquer pour agrandir

Sensei a ici identifié un studio photo, la présence d'une échelle à l'arrière-plan, puis le visage du sujet, qu'il s'agit d'une femme et qu'elle porte ce qui ressemble à une combinaison spatiale. Tout cela forme autant de mots-clefs. Là, explique David Nuescheler, voilà que votre client préfèrerait que le mannequin regarde de l'autre côté, vous obligeant à devoir parcourir une à une les montagnes de photos prises durant la séance de shooting.

Cliquer pour agrandir

Ou pas. Sensei ayant reconnu un visage il va afficher des boutons de contrôle permettant de jouer sur son orientation (droite, gauche) ou sur des parties et caractéristiques (sourire, yeux). Après avoir cliqué sur l'orientation, un curseur permet de faire défiler à haute vitesse toutes les images de votre séance photo où la jeune femme a le visage tourné dans l'autre sens.

Cliquer pour agrandir
Cliquer pour agrandir

Après quoi, lorsqu'on a repéré une photo qui conviendra mieux, on peut l'appliquer sur le fond d'espace que l'on avait précédemment retenu. Là encore, Sensei se propose de donner un coup de main. À droite dans l'interface (le pavé rouge) il propose de créer tout seul un masque autour du sujet pour l'intégrer convenablement dans le fond.

Cliquer pour agrandir

L'assistance de Sensei ne s'arrête pas là. Le moteur peut proposer des polices de caractères parmi celle que vous utilisez souvent et qui iront avec la tonalité graphique du visuel en question.

Cliquer pour agrandir

Si votre client veut subitement décliner aussi sur iPhone ces différentes documents, il suffit de basculer dans XD, l'application de prototypage d'interfaces. On demande à Sensei de « Créer une maquette pour l'iPhone 8 ». Aussitôt dit, aussitôt fait, les 6 écrans précédents pour l'iPad sont recomposés en autant d'écrans pour un iPhone et le chemin de navigation entre eux est préservé.

Cliquer pour agrandir

Dernière étape de cette démonstration spectaculaire, le creative graph. Tout le cheminement qui a conduit du croquis initial au visuel final est présenté sous la forme d'un arbre où l'on va pouvoir à nouveau jouer avec les variables qui sont autant de feuilles.

Cliquer pour agrandir

La branche dépendant de la photographie du mannequin contient par exemple le mot-clef déjà utilisé précédemment, celui du visage. Un clic et on peut encore à ce stade changer son orientation.

Cliquer pour agrandir

En remontant à la racine de cet arbre, au niveau du croquis, où Sensei avait détecté un visage féminin, on peut demander à le remplacer par un visage masculin qui sera pioché dans votre stock d'images. Le visuel final est alors modifié pour montrer un homme plutôt qu'une femme dans la tenue spatiale.

Cliquer pour agrandir

Comme toute démonstration bien huilée, on ne sait quelles sont les limites et les contraintes du système. Si toutes ces fonctions sont envisageables prochainement ou si certaines ont encore besoin de quelques années de développement. Adobe n'a pas dit non plus quand on disposerait de tout ou partie de ces outils. Reste que la présentation était assez étonnante et que l'on avait du mal parfois à croire que l'on était dans Photoshop. La démo de ce prototype débute à 2h13 dans la vidéo.

Catégories: 
Tags : 

Les derniers dossiers

Ailleurs sur le Web


33 Commentaires Signaler un abus dans les commentaires

avatar vlsf1 18/10/2017 - 23:15 via iGeneration pour iOS

A terme on risque d’avoir des outils complètement fous où on pourra « tourner » la tete d’une personne sur une photo sur la gauche ou la droite.

Par contre pour toutes les suggestions j’ai peur que ça uniformise (encore plus) la création graphique... meme si, si l’IA est vraiment intelligente, elle ne donnera jamais 2 fois la même chose

avatar Florian Innocente macG 18/10/2017 - 23:33 (edité)

La nature de la démo et sa courte durée donnent effectivement l'impression que le gus n'a plus grand chose à faire, sinon de feuilleter des choix proposés par l'assistant et valider.

avatar Lecorbubu 19/10/2017 - 00:01 via iGeneration pour iOS

@vlsf1

Tout à fait d’accord. Ce genre de procédé est pas mal pour le grand public qui a envie de faire un truc sympathique sans forcément avoir beaucoup de compétence mais pour les pros je suis un peu plus dubitatif.

Quelle part laisse t-on à l’imagination et à l’intuition avec ces techniques ? Je suis frappé de voir qu’on cherche à traiter un boulot de créatif avec une logique technocrate. Ça laisse songeur.



avatar occam 19/10/2017 - 03:00 (edité)

@ Lecorbubu

« Quelle part laisse t-on à l’imagination et à l’intuition avec ces techniques ? »

Cette question sous-entend que la nature de l'imagination et de l'intuition humaine serait de nature radicalement différente des modes de fonctionnement de l'intelligence artificielle.
Cela reste à démontrer.

Les progrès tant des neurosciences que de la recherche fondamentale ein intelligence artificielle suggèrent plutôt que nous avons tendance à surestimer notre créativité consciente — notre capacité de produire du nouveau avec de l'ancien, de l'inconnu à partir du connu — et à sous-estimer la complexité des fonctions intégratives des opérations que notre système nerveux gère d'une manière qui nous est, essentiellement et fondamentalement, inconsciente.

avatar Lecorbubu 19/10/2017 - 07:33 via iGeneration pour iOS

@occam

Si tu ne connais pas déjà, je te conseilles l’écrit d’un chercheur qui s’appelle Pierre Giorgini dont l’ouvrage s’intitule La Transition Fulgurante. Dans lequel il vient à démontrer que dans un système de plus en plus informatisé et automatisé les disciplines qui peuvent être encore incarné par l’homme sont celles des milieux créatifs, de l’invention.

Bien entendu cette recherche n’est pas une vérité absolue mais elle permet une vision intéressante de ces problématiques.

avatar Lecorbubu 19/10/2017 - 08:40 via iGeneration pour iOS

@occam

Par ailleurs ce qui me dérange beaucoup c’est cette idée de suggestion dans le process de création, l’IA d’adobe va comprendre, dans le cas présent que l’illustration est en lien avec l’espace, soit la démo est étonnante et ne me pose pas de problème particulier.

En revanche, ce qui est plus dérangeant c’est d’être assisté par une IA qui va suggérer des références standardisés alors que ce type de travail va solliciter le vécu, la sensibilité, les références personnelles de l’artiste réalisant l’image, des paramètres que le logiciel n’intègre pas. En utilisant cet assistant je risque d’avoir les mêmes suggestions que mon voisin alors qu’en temps normal on aurait peut être pas du tout eu recours aux mêmes éléments.

Ce procédé vient encore plus influencer la notion d’imaginaire collectif. L’idée de l’espace ne me renvoie pas nécessairement à ce que Adobe montre ici...

Bon, et pour avoir été dans ce milieu créatif et encore le côtoyé je ne peux que me marrer doucement quand je vois que le résultat de toute cette technologie de pointe produit une affiche de block Buster hyper conventionnel à la qualité douteuse ...

avatar JoTaPé 19/10/2017 - 04:22 (edité)

Question : les réseaux de neurones ont-ils de l'imagination ?
Si on considère qu'imaginer c'est créer des liens entre connaissances déjà acquises, la réponse est oui.
Si imaginer c'est inventer, créer de nouvelles connaissances, c'est non.
Alors, les artistes, les crais, les créateurs ont encore de l'avenir devant eux :-)

avatar harisson 19/10/2017 - 10:50

@JoTaPé

Ce n'est pas tout à fait vrai, il y a récemment des IA qui ont inventé un nouveau langage de communication/langue pour communiquer entre elles (projet arrêté).

Et puis bon, même sans IA, l'imagination humaine tend à diminuer, formatée par l'"entonnoir de la logique économique de masse".

avatar iPop 19/10/2017 - 10:06 via iGeneration pour iOS

@Lecorbubu

La communication dans ses formes ne sont que des moyens économiques.
Vous voulez faire de l'art ? Acheter des toiles.
Alors oui il y'a des perles mais ça reste qu'un moyen.

avatar Lecorbubu 19/10/2017 - 10:18 via iGeneration pour iOS

@iPop

Art = toile ou peinture ? Eh bien... on n’est pas sorti de l’auberge.

avatar Carbonized 19/10/2017 - 00:05

Le problème, c'est que l'on va avoir encore plus de détourages pourris parce-que "Mr je m'imagine graphiste" va utiliser cette fonction alors que le résultat est mauvais.

avatar 0MiguelAnge0 19/10/2017 - 02:09 via iGeneration pour iOS

Partout pareil: quand lea castes se sentent menacées, les mêmes clichets resortent....

avatar pariscanal 19/10/2017 - 06:48 via iGeneration pour iOS

Cela me semble être juste des contraintes et une usine à gaz , C est un système encombrant pour la création ,
C est bien pour le commercial qui veut sa créa lui même 🤣

avatar lesurfeurfou 19/10/2017 - 07:00 via iGeneration pour iOS

La fin des DA ?

avatar SidFik 19/10/2017 - 08:50 via iGeneration pour iOS (edité)

@lesurfeurfou

La fin des da non, pas tant que l'ia aura le monopole sur la création à default de l'avoir sur l'exécution, la fin des graphistes ou des executant par contre est plus probable, etant donné le peu de considération pour ces metier, il n'est pas impossible de penser que certaines boites voulant minimiser leurs couts au maximum vont faire l'impasse sur la partie création en la refilant à une ia qui fera le boulot comme ils l'entendent et pour moins cher.

Et puis au moins l'ia ne chippotera pas quand ils s'agira de mettre "ce logo en plus gros"

avatar harisson 19/10/2017 - 11:23 (edité)

@SidFik

"Et puis au moins l'ia ne chippotera pas quand ils s'agira de mettre "ce logo en plus gros"

L'IA market déclenchera l'alarme en disant que si le logo est plus gros, il perdra beaucoup d'argent et plouf plouf département marketing fermé pour optimisation des coûts ^_^

avatar SidFik 19/10/2017 - 08:30 via iGeneration pour iOS

Cool comme cela a terme on vas aussi pouvoir se passer du metier de graphiste, une aubaine pour les comerciaux qui se sentent l'âme d'un créatif, ils vont enfin pouvoir vendre de la merde standardisé sans avoir un con qui fait chier à leur rappeler que le truc est graphiquement indigeste ....

Remarquez, peut être qu'a terme leur profession aussi vas finir pas être remplacé par une ia, mais je sent bien qu'ils auront les moyens de faire en sorte de se protéger ...

avatar Fennec72 19/10/2017 - 09:17 via iGeneration pour iOS

Peut-on considérer que l’arrivée de challengers comme ceux d’Affinity pousse Adobe à innover ?

avatar Hasgarn 19/10/2017 - 09:32 via iGeneration pour iOS

@Fennec72

Je ne trouve pas cette solution innovante.
Ça pourrait être de la R&D et dans ce cadre, pour quoi pas.

Actuellement, Affinity ou Pixelmator court après Adobe qui a une avance historique et des applications métiers très complètes. Adobe tente un truc et cherche à encadrer la création pour mieux enfermer et intégrer. Ça, c'est une chose que les concurrents ne pourront pas faire de sitôt.

Par contre, les concurrents ont tout intérêt à écouter les besoins de leurs clients, ça leur donnera un avantage certain.

avatar conster 19/10/2017 - 09:48 via iGeneration pour iOS

@Hasgarn

Adobe, comme beaucoup d’autres ne veut pas rater le train de l’IA qui est la prochaine lame de fond pour tout ce qui va toucher le développement. Elle pose des jalons pour ce qui deviendra incontournable d’ici peut de temps...

avatar Hasgarn 19/10/2017 - 11:58

Le problème n'est pas l'IA mais ce qu'ils en feront.
Et j'ai pas confiance

avatar Hasgarn 19/10/2017 - 09:27 via iGeneration pour iOS

Ça me donne franchement l'impression qu'adobe en a marre de développer des outils pour créatifs (et par conséquent la variété) et préfère la normalisation.

Mouais…

avatar DouceProp' 19/10/2017 - 09:47

C'est amusant de voir que l'affiche finale a peu à voir avec l'idée de base en dessin...
Vivement que Photoshop donne des idées et face la mise en page tout seul histoire que les DA, graphistes et leurs copains n'aient plus de boulot... Salaud de Sensei, je suis déjà contre ce truc.
(Je serai à la retraite quand ce machin sera au point et vraiment utilisé...)

avatar victoireviclaux 19/10/2017 - 10:42 via iGeneration pour iOS

Ce forçage d'Adobe, d'aller vers des solutions d'abonnement... ça me gratte...

avatar umrk 19/10/2017 - 12:05

Un "Sensei" est un instructeur en arts martiaux, auquel on doit le plus grand respect .....

Pages