Avec ARKit 2.0, l'iPhone peut suivre les yeux de l'utilisateur et c'est assez épatant

Mickaël Bazoge |

Beaucoup s'interrogent encore sur la pertinence de la réalité augmentée… en voici un usage vraiment convaincant et potentiellement très utile. Matt Moss a développé un système de contrôle de l'iPhone X avec les yeux. Il s'est appuyé sur ARKit 2.0 qui détermine la position des yeux par rapport à différentes zones de l'écran ; pour valider, il suffit de cligner des yeux.

La démo ci-dessus permet à l'utilisateur de « cliquer » sur un bouton ou une image dans une grille, la zone fixée étant mise en surbrillance au passage de l'œil. Les utilisateurs qui ne peuvent se servir de leurs doigts trouveraient ici une solution bien adaptée. Apple, qui a l'accessibilité chevillée au corps, serait sans doute bien inspirée de développer quelque chose du même genre (ou d'embaucher Matt !).

Tags
avatar Paul_M | 

Impressionnant
Cette fonctionnalité d'ARKit 2.0 est-elle limitée aux caméras frontales "avancées" de l'iPhone X ?

avatar Louis_EYE | 

@Paul_M

Non pas que l’on sache c’est du à arkit pas à au détecteur qui de toute façon détecter le visage pas la position des yeux

avatar haydriss91 | 

@Louis_EYE

Bien sûr que si, TrueDepth détecte oú regarde l’utilisateur. Si j’essaye de déverrouiller mon iPhone sans le regarder juste en le mettant devant mon visage, ça ne marche pas, il faut regarder l’écran pour que ça fonctionne

avatar Louis_EYE | 

@haydriss91

Ah oui c’est vrai autant pour moi

avatar Louis_EYE | 

@haydriss91

Aussi après qui te dit que c’est du au capteur true depth et pas juste à la caméra pck une caméra serait totalement capable de suivre ça donc e pense que l’iPhone X n’a rien à voir avec cette capacité

avatar ovea | 

@Paul_M

Ça a existé depuis très longtemps sur Mac avec une simple caméra … maintenant, qu'on a accepté de remettre en cause le mythe technologique et particulièrement celui des nains des GAFAMI, l'algorithme a peut-être été mis au placard après rachat et ressort en exclu ARKit, qui peut le dire ?

avatar jimmy92250 | 

Ha oui quand même !

avatar Lecorbubu | 

Si les rumeurs d’un casque AR/VR se concrétisent on peut aisément penser que ce type d’interaction soient exploitées. On parle d’une commercialisation pour 2020, quand on voit ce type de démo ça commence à devenir crédible.

avatar reborn | 

Wow, C’est top pour offrir encore plus d’options accessibilités 👌

avatar XiliX | 

@reborn

"Wow, C’est top pour offrir encore plus d’options accessibilités 👌"

Exactement...

avatar Dgamax | 

Comment tu fais quand tu clignes des yeux naturellement? Ça fait un tap anyway?

avatar reborn | 

@Dgamax

Il faudrait un algo qui ignore les clignements naturels

avatar huexley | 

zoomer / dézoomer ca va être tendu

avatar debione | 

Ben facile tu louches de l'intérieur vers l'extérieur ou vice versa... Ca plus parler a son tel, et le tableau est presque complet.

avatar TrollMan06 | 

@debione

T'arrives à loucher vers l'extérieur ? 😳

avatar bunam | 

C'est facile il suffit de penser à regarder au loin...
Ha bin non je n'y arrive pas ;)

avatar huexley | 

ahah merci XD

avatar debione | 

@Troll man:

Un peu d'imagination diantre: Tu tournes la tête, tu louches à l'intérieur, tu te remets face au tel et tu relâches les yeux...

putain, ça mériterait presque un court métrage ^^

avatar ya2nick | 

@debione

Froncer les sourcils pour zoomer, et écarquiller les yeux me semble plus naturel.
Il y a un petit jeux iOS qui utilise cette méthode , on a l’air con quand on y joue dans le métro.

avatar debione | 

oui, ou ouvrir la bouche, plus tu l'ouvres plus ça zoom !

avatar ya2nick | 

@debione

😂
ARkit détecte la langue il me semble, je suis sur que des devs vont nous sortir des concepts intéressants.

avatar IceWizard | 

@ya2nick
"ARkit détecte la langue il me semble, je suis sur que des devs vont nous sortir des concepts intéressants."

Effectivement, on pourrais avoir une toute nouvelle game de "gestures", comme :

- tirer la langue à gauche pour "Annuler"
- tirer la langue à droite pour "Confirmer"
- tirer la langue au milieu pour lire les conditions d'utilisation de l'application

Combiner avec la détection des yeux, les gonflements des joues et l'ouverture de la bouche, on peut imaginer des combinaisons pour déverrouiller l'appareil, style :

- tirer la langue au milieu
- gonfler la joue droite
- regarder vers la gauche
- gonfler la joue gauche
- regarder vers le haut
- gonfler les deux joues
- tirer la langue à gauche
- ouvrir la bouche en grand

Pas trop socialement invalidant .. enfin si un peu quand même !

Pour les trolls on peut ajouter : "montrer les dents"

avatar sachouba | 

@IceWizard :
J'ai hâte de voir la démonstration par Craig Federighi !

avatar IPICH | 

@huexley

😂😂😂😂😂

avatar vlsf1 | 

Et apparement ça se confirme dans le Animojis qui suivent vachement mieux le regard

avatar IceWizard | 

ENFIN, j'avais tellement hâte d'avoir des publicités bloquant l'affichage si l'utilisateur ne regarde pas l'écran ..

avatar MrJamesAdams99 | 

@IceWizard

Tiens Black Mirror l'avait évoqué dans un épisode haha

avatar IceWizard | 

@MrJamesAdams99
C'est un vieux fantasme de publicitaires : trouver un moyen de forcer les gens à regarder leurs vidéos. La pause "pipi" pendant les pubs a fait enrager des générations de pubeux..

avatar rikki finefleur | 

Cela existe, les pubs s'arretent si tu n'es pas sur la page.

avatar TrollMan06 | 

@rikki finefleur

Tu peux être sur la page et pour autant ne pas regarder la pub. 😉

avatar Lonsparks23 | 

@MrJamesAdams99

Point GodMirror

C’est comme le point Godwin, mais pour BlackMirror 👍

avatar Yacc | 

« Beaucoup s'interrogent encore sur la pertinence de la réalité augmentée… »

Et pourtant c’est au cœur des visions moyen terme de bien des acteurs majeurs de l’industrie et d’Apple en particulier.

Dans la vision de beaucoup l’AR peut être la source d’un profond changement de paradigme dans la façon de penser nos usages des outils informatiques.

C’est tout sauf le simple gadgets que beaucoup croient voir par manque de recule.

Nous avons là une des approche où les investissements en R&D sont les plus lourds.

La route est encore longue, l’issue incertaine, mais c’est là une des activités les plus dynamiques de l’époque.

avatar Malvik2 | 

@Yacc

Oui c’est sans doute très vrai, on pourra tout de même critiquer Apple qui en fait un argument de vente de ses derniers iPhone depuis 1 an, alors que pour l’instant rien de concret n’existe: même leur nouvelle app "mesure" sensé servir de mètre, intéressante sur le papier, perd tout son intérêt lorsque l’on s’aperçoit que sa marge d’erreur de mesure est d’au moins 10% !

Visiblement la technologie était encore trop précoce pour le grand public

avatar Yacc | 

@Malvik2

« on pourra tout de même critiquer Apple qui en fait un argument de vente »

Pourquoi critiquer ?

Cela a un impact négatif sur les ventes ?

Si ce n’est pas le cas, ils font leur boulot et ils le font bien 😉

avatar Malvik2 | 

@Yacc

Pourquoi? Bah parce que cela prend une grande place dans leur comm pour vendre leur iPhone, y compris au client lambda que je suis, qui a été très déçu depuis 1 de la RA...
Encore une fois je ne nie pas son énorme potentiel, juste la façon dont Apple s’en sert pour vendre ses smartphones: actuellement, c’est du vent.

avatar Yacc | 

@Malvik2

La seule façon de juger une com c’est son efficacité commerciale.

Le reste c’est de la littérature.

Si ça aide à vendre c’est de la bonne com.

Apple est une entreprise capitaliste le seul critère de jugement pertinent de ses actes ce sont les critères capitalistes de création de valeur pour l’actionnariat.

Je ne défends pas cela mais c’est la règle du jeu et donc de son arbitrage 😉

avatar Malvik2 | 

@Yacc

Bah oui techniquement je ne dis pas le contraire, je me doute bien que leur com dessus marche bien, ça n’en reste pas moins que je désapprouve cette façon de vendre ce qui n’existe pas, à mon humble niveau😉

avatar xDave | 

@Malvik
Je ne suis pas sûr qu'Apple communique "vraiment" sur l'AR pour vendre son smartphone.
Je veux dire qu'on a pas vu de publicité à destination du grand public sur ces fonctions, à part quelques animojis 😄.
J'ai plus l'impression qu'on est dans une phase 1 où Apple s'adresse aux développeurs en mettant les premiers outils à disposition. Non?

avatar Bigdidou | 

@Yacc

"La seule façon de juger une com c’est son efficacité commerciale."

Il ne s'agit pas d'avoir un point de vue à propos de la com, mais de la mise en oeuvre d'une technologie.
Encore une fois, le point du vue de l'industriel est le sien, le notre est le notre.

avatar Yacc | 

@Bigdidou

Je comprends ton point de vue mais admet qu’on ne peut reprocher à une entreprise de faire des choix marketing efficaces 😎

avatar Bigdidou | 

@Yacc

"admet qu’on ne peut reprocher à une entreprise de faire des choix marketing efficaces 😎"

Bien sûr que si, s'il s'agit de choix systématiquement court-termistes.
Je persiste à penser qu'il y a une vie en dehors du marketing et que les entreprises ont un role social et sociétal, heureusement.
Lorsqu'il s'agit de mettre en place une technologie novatrice dont on attend un gain à moyen terme, voire à long terme, il faut bien que le marketing ferme un peu sa gueule.

avatar Yacc | 

@Bigdidou

Tu es un idéaliste 😎

L'humanité ne sera heureuse que le jour où le dernier bureaucrate aura été pendu avec les tripes du dernier capitaliste

avatar Bigdidou | 

@Yacc

Oui, enfin heureusement qu'il y a des entrepreneurs et des entreprises qui ont des visions long terme.

avatar Yacc | 

@Bigdidou

Des profits futurs ? Oui 😉

Après je suis moi même un social traitre de patron 😂

avatar Bigdidou | 

@Yacc

"Après je suis moi même un social traitre de patron 😂"

Je m'en doutais ;)

avatar Yacc | 

@Malvik2

« intéressante sur le papier, perd tout son intérêt lorsque l’on s’aperçoit que sa marge d’erreur de mesure est d’au moins 10% ! »

Tu es si certain de ce chiffre ?

Il est issu d’un protocole de tests sérieux ?

avatar Malvik2 | 

@Yacc

En fait c’est un chiffre issue...de mes propres calculs lol
j’ai testé depuis mardi un tas de mesures, et si cela donne une idée, malheureusement l’app n’est absolument pas fiable pour réellement servir. C’est dommage, car ça rend le tout un peu inutile en fait.
Un peu comme si le capteur cardiaque de la Watch était à la rue, ce n’est pas le cas et heureusement car je doute alors que la montre se soit aussi bien vendue depuis 3 ans

avatar Yacc | 

@Malvik2

Assez surprenant, il y a diverses app proposant ce type de services actuellement sous iOS 11 et donnant de meilleur taux d’erreur.

Attendons d’avoir la version release pour juger 😎

avatar DG33 | 

@Yacc

Par meilleur taux d’erreurs tu veux bien dire une marge d’erreur réduite ?

avatar Yacc | 

@DG33

Yep 👍

Pages

CONNEXION UTILISATEUR