Avec ARKit 2.0, l'iPhone peut suivre les yeux de l'utilisateur et c'est assez épatant
Control your iPhone with your eyes. Just look at a button to select it and blink to press. Powered by ARKit 2. #ARKit #ARKit2 #WWDC #iOS pic.twitter.com/ow8TwEkC8J
— Matt Moss (@thefuturematt) 7 juin 2018
Beaucoup s'interrogent encore sur la pertinence de la réalité augmentée… en voici un usage vraiment convaincant et potentiellement très utile. Matt Moss a développé un système de contrôle de l'iPhone X avec les yeux. Il s'est appuyé sur ARKit 2.0 qui détermine la position des yeux par rapport à différentes zones de l'écran ; pour valider, il suffit de cligner des yeux.
La démo ci-dessus permet à l'utilisateur de « cliquer » sur un bouton ou une image dans une grille, la zone fixée étant mise en surbrillance au passage de l'œil. Les utilisateurs qui ne peuvent se servir de leurs doigts trouveraient ici une solution bien adaptée. Apple, qui a l'accessibilité chevillée au corps, serait sans doute bien inspirée de développer quelque chose du même genre (ou d'embaucher Matt !).
Impressionnant
Cette fonctionnalité d'ARKit 2.0 est-elle limitée aux caméras frontales "avancées" de l'iPhone X ?
@Paul_M
Non pas que l’on sache c’est du à arkit pas à au détecteur qui de toute façon détecter le visage pas la position des yeux
@Louis_EYE
Bien sûr que si, TrueDepth détecte oú regarde l’utilisateur. Si j’essaye de déverrouiller mon iPhone sans le regarder juste en le mettant devant mon visage, ça ne marche pas, il faut regarder l’écran pour que ça fonctionne
@haydriss91
Ah oui c’est vrai autant pour moi
@haydriss91
Aussi après qui te dit que c’est du au capteur true depth et pas juste à la caméra pck une caméra serait totalement capable de suivre ça donc e pense que l’iPhone X n’a rien à voir avec cette capacité
@Paul_M
Ça a existé depuis très longtemps sur Mac avec une simple caméra … maintenant, qu'on a accepté de remettre en cause le mythe technologique et particulièrement celui des nains des GAFAMI, l'algorithme a peut-être été mis au placard après rachat et ressort en exclu ARKit, qui peut le dire ?
Ha oui quand même !
Si les rumeurs d’un casque AR/VR se concrétisent on peut aisément penser que ce type d’interaction soient exploitées. On parle d’une commercialisation pour 2020, quand on voit ce type de démo ça commence à devenir crédible.
Wow, C’est top pour offrir encore plus d’options accessibilités ?
@reborn
"Wow, C’est top pour offrir encore plus d’options accessibilités ?"
Exactement...
Comment tu fais quand tu clignes des yeux naturellement? Ça fait un tap anyway?
@Dgamax
Il faudrait un algo qui ignore les clignements naturels
zoomer / dézoomer ca va être tendu
Ben facile tu louches de l'intérieur vers l'extérieur ou vice versa... Ca plus parler a son tel, et le tableau est presque complet.
@debione
T'arrives à loucher vers l'extérieur ? ?
C'est facile il suffit de penser à regarder au loin...
Ha bin non je n'y arrive pas ;)
ahah merci XD
@Troll man:
Un peu d'imagination diantre: Tu tournes la tête, tu louches à l'intérieur, tu te remets face au tel et tu relâches les yeux...
putain, ça mériterait presque un court métrage ^^
@debione
Froncer les sourcils pour zoomer, et écarquiller les yeux me semble plus naturel.
Il y a un petit jeux iOS qui utilise cette méthode , on a l’air con quand on y joue dans le métro.
oui, ou ouvrir la bouche, plus tu l'ouvres plus ça zoom !
@debione
?
ARkit détecte la langue il me semble, je suis sur que des devs vont nous sortir des concepts intéressants.
@ya2nick
"ARkit détecte la langue il me semble, je suis sur que des devs vont nous sortir des concepts intéressants."
Effectivement, on pourrais avoir une toute nouvelle game de "gestures", comme :
- tirer la langue à gauche pour "Annuler"
- tirer la langue à droite pour "Confirmer"
- tirer la langue au milieu pour lire les conditions d'utilisation de l'application
Combiner avec la détection des yeux, les gonflements des joues et l'ouverture de la bouche, on peut imaginer des combinaisons pour déverrouiller l'appareil, style :
- tirer la langue au milieu
- gonfler la joue droite
- regarder vers la gauche
- gonfler la joue gauche
- regarder vers le haut
- gonfler les deux joues
- tirer la langue à gauche
- ouvrir la bouche en grand
Pas trop socialement invalidant .. enfin si un peu quand même !
Pour les trolls on peut ajouter : "montrer les dents"
@IceWizard :
J'ai hâte de voir la démonstration par Craig Federighi !
@huexley
?????
Et apparement ça se confirme dans le Animojis qui suivent vachement mieux le regard
ENFIN, j'avais tellement hâte d'avoir des publicités bloquant l'affichage si l'utilisateur ne regarde pas l'écran ..
@IceWizard
Tiens Black Mirror l'avait évoqué dans un épisode haha
@MrJamesAdams99
C'est un vieux fantasme de publicitaires : trouver un moyen de forcer les gens à regarder leurs vidéos. La pause "pipi" pendant les pubs a fait enrager des générations de pubeux..
Cela existe, les pubs s'arretent si tu n'es pas sur la page.
@rikki finefleur
Tu peux être sur la page et pour autant ne pas regarder la pub. ?
@MrJamesAdams99
Point GodMirror
C’est comme le point Godwin, mais pour BlackMirror ?
« Beaucoup s'interrogent encore sur la pertinence de la réalité augmentée… »
Et pourtant c’est au cœur des visions moyen terme de bien des acteurs majeurs de l’industrie et d’Apple en particulier.
Dans la vision de beaucoup l’AR peut être la source d’un profond changement de paradigme dans la façon de penser nos usages des outils informatiques.
C’est tout sauf le simple gadgets que beaucoup croient voir par manque de recule.
Nous avons là une des approche où les investissements en R&D sont les plus lourds.
La route est encore longue, l’issue incertaine, mais c’est là une des activités les plus dynamiques de l’époque.
@Yacc
Oui c’est sans doute très vrai, on pourra tout de même critiquer Apple qui en fait un argument de vente de ses derniers iPhone depuis 1 an, alors que pour l’instant rien de concret n’existe: même leur nouvelle app "mesure" sensé servir de mètre, intéressante sur le papier, perd tout son intérêt lorsque l’on s’aperçoit que sa marge d’erreur de mesure est d’au moins 10% !
Visiblement la technologie était encore trop précoce pour le grand public
@Malvik2
« on pourra tout de même critiquer Apple qui en fait un argument de vente »
Pourquoi critiquer ?
Cela a un impact négatif sur les ventes ?
Si ce n’est pas le cas, ils font leur boulot et ils le font bien ?
@Yacc
Pourquoi? Bah parce que cela prend une grande place dans leur comm pour vendre leur iPhone, y compris au client lambda que je suis, qui a été très déçu depuis 1 de la RA...
Encore une fois je ne nie pas son énorme potentiel, juste la façon dont Apple s’en sert pour vendre ses smartphones: actuellement, c’est du vent.
@Malvik2
La seule façon de juger une com c’est son efficacité commerciale.
Le reste c’est de la littérature.
Si ça aide à vendre c’est de la bonne com.
Apple est une entreprise capitaliste le seul critère de jugement pertinent de ses actes ce sont les critères capitalistes de création de valeur pour l’actionnariat.
Je ne défends pas cela mais c’est la règle du jeu et donc de son arbitrage ?
@Yacc
Bah oui techniquement je ne dis pas le contraire, je me doute bien que leur com dessus marche bien, ça n’en reste pas moins que je désapprouve cette façon de vendre ce qui n’existe pas, à mon humble niveau?
@Malvik
Je ne suis pas sûr qu'Apple communique "vraiment" sur l'AR pour vendre son smartphone.
Je veux dire qu'on a pas vu de publicité à destination du grand public sur ces fonctions, à part quelques animojis ?.
J'ai plus l'impression qu'on est dans une phase 1 où Apple s'adresse aux développeurs en mettant les premiers outils à disposition. Non?
@Yacc
"La seule façon de juger une com c’est son efficacité commerciale."
Il ne s'agit pas d'avoir un point de vue à propos de la com, mais de la mise en oeuvre d'une technologie.
Encore une fois, le point du vue de l'industriel est le sien, le notre est le notre.
@Bigdidou
Je comprends ton point de vue mais admet qu’on ne peut reprocher à une entreprise de faire des choix marketing efficaces ?
@Yacc
"admet qu’on ne peut reprocher à une entreprise de faire des choix marketing efficaces ?"
Bien sûr que si, s'il s'agit de choix systématiquement court-termistes.
Je persiste à penser qu'il y a une vie en dehors du marketing et que les entreprises ont un role social et sociétal, heureusement.
Lorsqu'il s'agit de mettre en place une technologie novatrice dont on attend un gain à moyen terme, voire à long terme, il faut bien que le marketing ferme un peu sa gueule.
@Bigdidou
Tu es un idéaliste ?
L'humanité ne sera heureuse que le jour où le dernier bureaucrate aura été pendu avec les tripes du dernier capitaliste
@Yacc
Oui, enfin heureusement qu'il y a des entrepreneurs et des entreprises qui ont des visions long terme.
@Bigdidou
Des profits futurs ? Oui ?
Après je suis moi même un social traitre de patron ?
@Yacc
"Après je suis moi même un social traitre de patron ?"
Je m'en doutais ;)
@Malvik2
« intéressante sur le papier, perd tout son intérêt lorsque l’on s’aperçoit que sa marge d’erreur de mesure est d’au moins 10% ! »
Tu es si certain de ce chiffre ?
Il est issu d’un protocole de tests sérieux ?
@Yacc
En fait c’est un chiffre issue...de mes propres calculs lol
j’ai testé depuis mardi un tas de mesures, et si cela donne une idée, malheureusement l’app n’est absolument pas fiable pour réellement servir. C’est dommage, car ça rend le tout un peu inutile en fait.
Un peu comme si le capteur cardiaque de la Watch était à la rue, ce n’est pas le cas et heureusement car je doute alors que la montre se soit aussi bien vendue depuis 3 ans
@Malvik2
Assez surprenant, il y a diverses app proposant ce type de services actuellement sous iOS 11 et donnant de meilleur taux d’erreur.
Attendons d’avoir la version release pour juger ?
@Yacc
Par meilleur taux d’erreurs tu veux bien dire une marge d’erreur réduite ?
@DG33
Yep ?
Pages