On parle depuis longtemps qu’un casque AR / VR est en préparation chez Apple. Ce nouveau dépôt de brevet décrit ci-dessous peut révéler un autre détail sur le fonctionnement de ce casque, indiquant un intérêt pour le suivi oculaire, ce qui n’est pas la 1ʳᵉ fois dans le développement. La société cherchait auparavant à breveter une technologie qui suivait le mouvement des yeux comme moyen de contrôler un “agent virtuel” pour effectuer des tâches dans un environnement de réalité augmentée ou virtuelle.
Apple cherche à breveter une technologie pour le suivi du regard basé sur une caméra qui utilise des réseaux de neurones dans un casque AR ou VR. Voici comment cela fonctionne : une caméra événementielle – ou un capteur de vision qui capte les changements d’intensité lumineuse, qui collecte des données sur les mouvements oculaires, qui sont ensuite transmises à un réseau neuronal. Le réseau de neurones génère alors une caractéristique du regard, qui inclut le centre initial de la pupille de l’utilisateur et tout ajustement du regard à partir du suivi de l’entrée focalisée sur l’emplacement, ou des mouvements minuscules de votre pupille uniquement, et non de l’œil entier.
Apple note que ce type de suivi oculaire fonctionne plus rapidement et plus efficacement pour guider les interactions de l’utilisateur, offrant une meilleure résolution et réduisant la distorsion géométrique dans le rendu des objets 3D. Il consomme également beaucoup moins de puissance de traitement que les méthodes traditionnelles, évitant ainsi une consommation d’énergie excessive et une surchauffe du casque de l’utilisateur. Les systèmes de suivi du regard existants incluent souvent une caméra qui transmet des images des yeux de l’utilisateur à un processeur qui effectue le suivi du regard, a déclaré Apple dans son dossier de brevet. Cependant, la transmission des images à une fréquence d’images suffisante pour permettre le suivi du regard nécessite une liaison de communication avec une bande passante importante.
La réalité mixte est une technologie qui combine des éléments de la réalité augmentée et de la réalité virtuelle pour créer un environnement interactif où les objets virtuels et les objets réels coexistent et interagissent en temps réel dans leur environnement réel. Il existe de nombreux enjeux pour les entreprises qui sont dans cet univers comme le fait de créer de nouvelles possibilités d’interaction et d’utilisation, que ce soit dans les domaines du divertissement, de l’éducation, de la formation professionnelle, ou encore de l’architecture et du design.
Contrairement à la réalité augmentée qui se contente de superposer des éléments virtuels sur le monde réel, la réalité mixte permet une interaction plus poussée avec l’environnement réel. Les objets virtuels peuvent réagir aux mouvements de l’utilisateur, s’appuyer sur des surfaces réelles et interagir avec d’autres objets réels. Cela présente des défis technologiques supplémentaires par rapport à la réalité augmentée, car elle nécessite des capteurs plus avancés et des algorithmes de suivi précis pour assurer une intégration fluide des objets virtuels dans l’environnement réel. De plus, elle nécessite également des équipements plus sophistiqués tels que des casques ou des lunettes spécifiques.
La réalité mixte a le potentiel d’impacter de nombreux secteurs, tels que le divertissement, la formation, la santé, l’industrie, l’architecture et le design. Les enjeux résident dans l’exploration des possibilités offertes par cette technologie et dans l’adaptation des applications existantes ou le développement de nouvelles applications spécifiques à la réalité mixte.