Qu'est-ce qu'EyeSight sur le casque Vision Pro d'Apple ? Comment ça marche?

La fonctionnalité révolutionnaire EyeSight d'Apple Vision Pro est quelque chose que nous n'avons jamais vu auparavant sur un casque AR/VR. Voici donc tout ce que vous devez savoir à ce sujet.

Le casque Vision Pro d'Apple, à 3 499 $, est doté d'une fonctionnalité révolutionnaire appelée EyeSight. Intégré à visionOS, EyeSight réduit la sensation d'isolement lorsque vous portez le casque.

Vision Pro vous donne l'impression que les personnes à proximité font partie de votre expérience de réalité augmentée (RA). Il indique également aux autres autour de vous si vous pouvez les voir ou si vous êtes immergé dans la RA en fournissant des indices visuels sur ce sur quoi vous vous concentrez.

Suivez-nous pour tout savoir sur EyeSight, y compris son fonctionnement, les différents modes d'immersion qu'il prend en charge, et bien plus encore.

Interaction de matériel et de logiciels, EyeSight est l’une des meilleures fonctionnalités du casque Vision Pro. Son objectif principal est de montrer aux autres une version numérique de vos yeux clignotants.

"Vos yeux sont un indicateur essentiel de connexion et d'émotion, c'est pourquoi Vision Pro affiche vos yeux lorsque quelqu'un est à proximité", a déclaré Apple lors du discours d'ouverture de la WWDC 2023. L'effet rend l'appareil transparent. De plus, EyeSight peut restituer divers arrière-plans de mouvement pour informer les personnes du monde réel sur quoi vous vous concentrez actuellement.

Dans un article d'Apple Newsroom, Apple qualifie cette fonctionnalité de "innovation extraordinaire qui aide les utilisateurs à rester connectés avec ceux qui les entourent". Certes, il n’y a rien de comparable à EyeSight sur les autres casques AR/VR.

Un panneau OLED orienté vers l'extérieur à l'avant du casque utilise une lentille lenticulaire qui, selon Apple, projette « la perspective correcte de vos yeux pour chaque personne qui vous regarde ».

Lorsque Vision Pro détecte que vous consommez des médias ou utilisez une application, il affiche les graphiques appropriés sur l'écran EyeSight pour fournir des repères visuels. Cependant, lorsque quelqu'un s'approche de vous, le Vision Pro affichera vos yeux à la place.

Pour montrer vos yeux de manière réaliste, EyeSight utilise les données de caméras infrarouges internes, deux par œil, pour capturer vos mouvements oculaires et vos expressions faciales. Ces données sont transmises à un algorithme d'apprentissage automatique qui les combine avec votre Persona numérique, créée lors de la configuration de l'appareil à l'aide de la caméra TrueDepth frontale.

Ce que les autres voient est une représentation naturelle de la zone autour de vos yeux plutôt que de vos yeux réels.

EyeSight prend en charge plusieurs repères visuels pour permettre aux autres de savoir ce que vous faites en RA, comme une immersion totale dans la RA, prendre des photos, etc. EyeSight change automatiquement de mode en fonction de ce que vous faites à un moment donné. En tant que telle, la fonctionnalité EyeSight est l’une des applications les plus intéressantes de la technologie AR dans la vie quotidienne que nous ayons vues à ce jour.

Ce mode vous permet de voir l'autre personne, en lui révélant vos yeux. Lorsque les capteurs du casque détectent une personne qui s'approche de vous, EyeSight la fera temporairement « pénétrer » dans votre monde AR/VR afin que vous sachiez qu'elle est là.

Dans le même temps, la fonction affichera vos yeux vers la personne devant vous afin qu'elle sache qu'elle a votre attention. Lorsqu'il n'y a personne dans la pièce, EyeSight s'éteint et n'affiche pas vos yeux ni aucun arrière-plan personnalisé.

Lorsqu’il est entièrement plongé dans AR ou VR, EyeSight anime un motif coloré sur l’écran orienté vers l’extérieur. L'effet est quelque peu similaire à l'animation de l'orbe Siri, et votre entourage saura que vous êtes occupé par une activité. EyeSight peut également rendre vos yeux semi-transparents lorsque vous utilisez une application, en fonction du niveau d'immersion.

EyeSight entre dans ce mode lors de la prise de photos et de vidéos spatiales à l'aide du casque. Un indicateur visuel du mode de capture multimédia est un motif blanc ressemblant à du brouillard qui s'anime lorsque vous enregistrez ou clignote lorsque vous prenez une photo.

L'indicateur visuel sert d'indicateur de confidentialité essentiel pour indiquer aux personnes autour de vous que vous les enregistrez, semblable au son de l'obturateur de l'appareil photo sur votre iPhone.

Ce qui ressemblait à une rumeur folle s’est avérée vraie. En tant que fonctionnalité unique au Vision Pro, EyeSight est l'un des plus grands avantages d'Apple par rapport aux casques AR/VR concurrents. Si le but est de rendre le port d’un ordinateur facial un peu plus humain, EyeSight est à la hauteur.