L'eye tracking arrive sur HTC Live: voici ce que vous devez savoir

À la suite de la sortie de plusieurs casques de réalité virtuelle haut de gamme, les fabricants de matériel informatique commencent à rechercher le «prochain élément important» de la réalité virtuelle. Alors que la réalité virtuelle sans fil et la fidélité visuelle améliorée voient un investissement lourd, diverses nouvelles technologies font leur apparition, qui promettent de fournir une expérience plus immersive. Le suivi amélioré est l’un de ces domaines d’intérêt, dans le but de combler davantage le fossé entre votre corps physique et le monde virtuel.

Le suivi oculaire semble être l’une des technologies les plus intéressantes, offrant potentiellement d’énormes sauts en immersion et en performance. Avec des sociétés telles que "FOVE" prenant les commandes d'un casque VR avec un suivi complet du regard, nous commençons déjà à voir des petites entreprises faire pression pour la technologie. Mais que se passerait-il si vous pouviez utiliser le suivi oculaire sur votre matériel VR existant?

Mise à jour le 7 juin 2017: Nous avons actualisé ce guide avec des détails sur l'eye tracking de Tobii, qui promet une solution similaire mais intégrée pour le HTC Vive.

Entrez dans la classe

FOVE ayant encore quelques mois de retard sur la livraison de la première version de son casque, une nouvelle start-up chinoise, 7invensun, a de nouveau attiré l'attention sur l'eye tracking. Avec son prochain produit, "aGlass", la société s'apprête à proposer un module de suivi des yeux tiers pour tous les casques HTC Vive existants.

L'aGlass est composé de deux lentilles externes, situées au-dessus des lentilles existantes du HTC Vive. Ces revêtements en plastique sont équipés d'un ensemble de capteurs infrarouges et infrarouges destinés à suivre les mouvements des yeux et des paupières. Cela constitue une solution modulaire «plug-and-play», qui se connecte directement au casque via son port USB.

Bien que nous n'ayons pas encore mis la main sur le produit, 7invensun promet à la fois un suivi de l'œil précis et une faible latence de l'aGlass. Comme indiqué sur le site Web de la société, les trackers offrent une précision inférieure à 0, 5 degré et une latence inférieure à 5 ms. Si le produit est à la hauteur de ces affirmations, cela devrait offrir une traduction apparemment un-à-un de vos mouvements oculaires dans la plupart des scénarios.

Pour surmonter le problème d'interférence des lunettes, des lentilles personnalisées en verre seront également disponibles sur demande. La société propose déjà des objectifs myopes à 200, 400 et 600 degrés aux développeurs, sans frais supplémentaires. Ces lentilles peuvent être changées à la volée, ce qui empêche le traqueur d’être attaché à un individu en particulier.

Suivi des yeux Tobii

Tobii est une société suédoise qui a déjà acquis des racines dans l'eye tracking avec les solutions existantes pour les technologies d'assistance, la recherche et les jeux sur ordinateur. La société s’est récemment étendue à l’espace de réalité virtuelle et a déjà passé des commandes pour des kits de développement pour le suivi oculaire, qui jettent les bases de ses efforts.

Contrairement à la nature plug-and-play simple de l'aGlass, le kit de développement VR eye tracking de Tobii est une solution tout-en-un intégrée au "HTC Vive Business Edition". Avec un SoC (Système sur puce) "Tobii EyeChip" intégré directement dans le casque, sa technologie de suivi du regard est gérée indépendamment du casque, via des capacités de traitement supplémentaires.

En matière de suivi, la solution de Tobii s'appuie sur des capteurs infrarouges alignés à l'intérieur des objectifs. Bien que la technologie ne diffère pas trop des puissances offertes par aGlass, il s'agit d'une solution intégrée développée spécifiquement à l'intérieur d'un casque HTC Vive.

Tobii n'offre pas pour le moment de solution centrée sur le consommateur, mais ses technologies de suivi oculaire reconnues en font une solution prometteuse. Même si "7invensun" garantit actuellement une solution beaucoup plus accessible, la performance de aGlass reste à prouver.

À quoi s'attendre de l'eye tracking

Bien que nous n'ayons pas encore vu de nombreux cas de jeux prenant en charge le suivi oculaire, les fabricants ont déjà proposé diverses utilisations. Cependant, nous pouvons nous attendre à voir plus d'innovation lorsque le produit passera dans les mains de plus de développeurs.

En principe, le suivi oculaire peut avoir un effet considérable sur les performances, grâce à une technique connue sous le nom de "rendu sophistiqué". En suivant le positionnement de vos yeux, les jeux peuvent être rendus en fonction de votre champ de vision. Cela permet à votre PC de ne restituer que certaines parties d'une image dans le détail, avec des objets de votre vision périphérique rendus avec une résolution plus faible.

Un exemple de rendu fové en action, tel que démontré sur la plateforme de suivi du regard de SensoMotoric Instruments.

Avec ce moyen plus efficace d’affichage des images en réalité virtuelle, ceci pourrait théoriquement réduire le point d’entrée du matériel de réalité virtuelle. avec moins de charge déposée sur votre PC. 7invensun a précisé que le rendu prêt à l'emploi serait pris en charge avec le matériel NVIDIA, à l'aide d'un logiciel interne fourni.

Le suivi oculaire peut également influer sur le jeu en ajoutant une méthode supplémentaire de saisie des expériences de réalité virtuelle. En traquant les yeux, il est possible de capter un nouveau niveau d'émotion chez le joueur, ce qui pourrait considérablement affecter les expériences sociales offertes en réalité virtuelle. Ce suivi pourrait également s'étendre aux expériences de jeu, avec un jeu s'adaptant de manière dynamique au positionnement de vos yeux.

Comment puis-je commencer avec l'eye tracking?

Le premier lot d'unités aGlass sera expédié de Chine plus tard en mai, dans le cadre d'une série limitée de pré-commandes de 220 $. La société a également promis de déployer des déploiements plus étendus au cours du second semestre de cette année, notamment en prévoyant une sortie dans l'Ouest. Espérons qu’au moment où le produit sera plus largement disponible, de nombreux développeurs auront embarqué.

En ce qui concerne Tobii - seules les demandes concernant ses kits de développement de suivi de l’œil initiaux sont actuellement acceptées. Bien que la société n'accepte pas les commandes préalables pour des accessoires destinés au consommateur, nous ne manquerons pas de mettre à jour ce message une fois que plus d'informations seront mises à jour.