De l'AR pour contrôler Netflix avec ses yeux

Category: 
De l'AR pour contrôler Netflix avec ses yeux
15 Novembre, 2018

Eye Nav utilise la technologie de reconnaissance du visage de l'iPhone pour contrôler l'application Netflix avec les yeux.

 

Les équipes de Netflix ont développé une fonctionnalité étonnante qui pourrait être très utile pour les personnes en situation de handicap. ARkit 2, le kit de développement "réalité augmentée" proposé par Apple, permet d’utiliser le matériel présent sur l’iPhone et notamment la caméra TrueDepth. Cette dernière permet de contrôler le système de reconnaissance faciale, Face ID qui déverrouille le téléphone. 

 

À l'occasion du "Hack Day", ils ont détourné ce système pour qu'il détecte et suive le regard. Il est ainsi possible de naviguer à travers l'application avec les yeux. "Nous avons utilisé le suivi visuel pour déplacer le pointeur sur l'écran, et nous avons mesuré le temps passé sur la même zone pour déclencher l'équivalent d'un tap. Nous avons ensuite utilisé un geste facial (langue tendue vers l'extérieur) pour faire un retour sur l'écran" expliquent Ben Hands, John Fox et Steve Henderson qui ont développé la fonctionnalité. 

 

Cette fonction est toujours en développement. La vidéo de présentation relayée par nos confrères de The Verge est convaincante. Le système réagit très bien. Espérons qu'elle sera rapidement disponible dans les paramètres d'accessibilité.

A voir aussi

VRrOOm Wechat