Nouvelles

Jul 31, 2023

Réalité Augmentée, Réalité Virtuelle, Réalité Mixte expliquées

Apple est sur le point de lancer son nouveau produit le plus important depuis une décennie. Réalité

Apple est sur le point de lancer son nouveau produit le plus important depuis une décennie. Reality Pro, comme on dit qu'il s'appelle, sera un casque VR pas comme les autres. Non, je veux dire un casque AR. Attendez, faites-en un casque MR avec un cadran pour basculer entre AR et VR à volonté…

Malgré des années de casques de grandes sociétés telles que Google, Microsoft, Sony, Facebook/Meta, etc., la plupart des gens ne comprennent toujours pas la réalité augmentée, la réalité virtuelle ou la MR. Avant qu'Apple ne déchaîne Reality Pro sur nos visages, clarifions ce que ces choses signifient et discutons de ce que nous pouvons attendre de la nouvelle plate-forme d'Apple.

Commençons par le plus facile. Les produits de réalité virtuelle (VR) placent des écrans devant vos yeux avec des lentilles pour élargir leur champ de vision. Il y a généralement deux écrans (ou un divisé en deux), chacun affichant le point de vue de chacun de vos yeux pour donner un véritable effet 3D.

Le mouvement et la position du casque doivent être suivis avec des gyroscopes et des capteurs pour ajuster votre vue à chaque petit mouvement de ce que vous voyez à l'écran. Afin de vous sentir complètement immergé et d'éviter le mal des transports, cela doit être fait extrêmement rapidement, avec une "latence du mouvement au photon" très faible (le temps entre le mouvement de votre tête et ce changement étant émis par les écrans).

L'effet final est qu'il semble que vous soyez dans un endroit entièrement généré par ordinateur. Cela peut être caricatural ou réaliste, mais tout - l'environnement et tout ce qu'il contient - est fait d'infographie. C'est ça la VR : plus de monde réel, tout un monde virtuel.

Exemples de produits :Meta Quest, PlayStation VR, HTC Vive, Valve Index

Méta

La réalité augmentée (RA) ne remplace pas le monde réel par un monde virtuel, mais intègre plutôt des objets numériques dans le monde réel. Cela peut être fait sur un écran, comme dans une application AR sur votre iPhone, dans un casque ou à l'aide d'une paire de lunettes.

L'idée de base est que vous voyez le monde réel, mais des éléments générés par ordinateur y sont ajoutés : icônes, flèches, texte, écrans vidéo flottants, personnes, peu importe.

Une note importante est que les graphiques doivent apparaître comme présents dans le monde réel. Un objet AR peut rester au même endroit dans le monde réel lorsque vous vous déplacez autour de lui, et peut même interagir avec la géométrie du monde réel comme le sol, les tables, les murs ou même les personnes. Le simple fait de montrer des graphiques flottants sur un écran transparent devant vos yeux n'est pas de la réalité augmentée.

La RA nécessite au moins une cartographie 3D rudimentaire de votre environnement immédiat, qui est généralement réalisée à l'aide de plusieurs caméras et capteurs comme le LIDAR. De nombreux produits se présentent comme AR mais sont plus précisément appelés "affichages tête haute" car ils ne peuvent pas réellement intégrer l'infographie dans le monde réel. Ces produits ne font pas une carte 3D de votre environnement pour y intégrer des graphiques, ils font simplement flotter des choses devant vous. Google Glass, Nreal Air et Vuzix Blade 2 en sont des exemples.

Pokémon Go est souvent cité comme une application AR, et cela est souvent confondu avec le fait que vous le jouez dans le monde réel. C'est juste un jeu basé sur la localisation, pas AR. Il y a une petite partie AR du jeu : lorsque vous lancez votre Poké Ball pour attraper un Pokémon, vous pouvez activer un "mode AR" qui montre votre Pokémon cible dans le monde réel sur l'écran de notre téléphone. Cette partie, et cette partie seulement, est qualifiée d'AR. (Et la plupart des joueurs le désactivent.)

Un casque AR pourrait ressembler à un casque VR, bloquant complètement votre vision du monde extérieur, s'il utilise des caméras externes pour transmettre une vidéo en temps réel de votre environnement aux écrans à l'intérieur. C'est ainsi que Reality Pro d'Apple devrait fonctionner, et cela contraste avec quelque chose comme Microsoft HoloLens qui a un écran transparent avec un affichage intégré, de sorte que vous visualisez directement le monde réel lui-même.

Pourtant, tant que vous voyez le monde réel qui vous entoure en temps réel, avec des graphiques générés par ordinateur intégrés et pas seulement flottant devant vous, cela est considéré comme de la réalité augmentée.

Exemples de produits :Microsoft HoloLens, Magic Leap et les prochains Snap Spectacles de nouvelle génération sont considérés comme de véritables lunettes ou casques AR.

Microsoft

C'est là que ça devient déroutant. Apparemment, la réalité augmentée n'est pas suffisamment augmentée, de sorte que l'industrie a inventé un terme qu'elle ne semble même pas définir clairement pour séparer la réalité augmentée de tous ces affichages virtuels et affichages tête haute ainsi que de l'application AR pour téléphone.

Recherchez la réalité mixte (MR) et vous trouverez une douzaine de définitions différentes pleines d'expressions pas très précises comme "rassemble le monde réel et le monde virtuel de manière plus immersive" ou "permet à plusieurs utilisateurs d'interagir ensemble dans un espace virtuel". Certains disent que cela vous oblige à manipuler des objets virtuels de vos propres mains, tandis que d'autres disent que la réalité mixte peut utiliser des contrôleurs.

Intel dit que MR "rassemble des éléments du monde réel et numériques" (c'est ce que fait AR). "Il offre la possibilité d'avoir un pied (ou une main) dans le monde réel et l'autre dans un lieu imaginaire, décomposant les concepts de base entre réel et imaginaire, offrant une expérience qui peut changer votre façon de jouer et de travailler aujourd'hui." Poétique, mais pas particulièrement utile.

Pendant ce temps, Microsoft déclare : "Cela nous libère des expériences liées à l'écran en offrant des interactions instinctives avec les données dans nos espaces de vie et avec nos amis." Je ne sais pas ce qu'est une "interaction instinctive" avec les données, mais cela semble incroyablement ennuyeux. "Les gens ne réalisent peut-être même pas que les filtres AR qu'ils utilisent sur Instagram sont des expériences de réalité mixte."

Ainsi, même parmi les plus grandes entreprises technologiques, il ne semble pas y avoir d'accord sur la façon de définir la RM, ou sur les normes minimales permettant à un produit ou à une expérience d'être étiquetés réalité mixte.

Je pense qu'une bonne façon d'y penser est la suivante : la réalité mixte est un sur-ensemble de la réalité augmentée. C'est de la RA avec un niveau minimum d'interaction et d'immersion plus élevé. Il est visualisé de vos propres yeux (à travers des lunettes transparentes ou un casque avec vidéo passthrough de caméras externes) plutôt que affiché sur un écran de téléphone ou de tablette. Et il ne se contente pas d'afficher des informations intégrées dans le monde réel, il vous permet d'interagir avec ces objets virtuels et pour les objets d'interagir avec l'environnement.

Google

D'après ce que nous savons du casque d'Apple, il offrira une expérience VR, AR et MR inégalée. On dit que c'est un casque qui ressemble à une paire de lunettes de ski, ce qui obscurcira votre vision du monde extérieur.

Plusieurs caméras alimenteront une vue en temps réel du monde qui vous entoure, et une flotte de capteurs créera une carte 3D de votre environnement afin que les objets virtuels puissent s'y intégrer et interagir avec. Vous contrôlerez des applications et manipulerez des objets avec vos mains, et des capteurs internes détecteront même vos mouvements oculaires.

Un cadran à l'extérieur, similaire à la couronne numérique d'une Apple Watch, vous permettra de contrôler la quantité de monde extérieur que vous souhaitez voir. Tournez-le dans un sens et le monde est bloqué, ne laissant que des environnements virtuels : VR. Tournez-le dans l'autre sens et vous voyez le monde réel complet (alimenté par les écrans du casque à partir de plusieurs caméras externes), avec des graphiques générés par ordinateur intégrés (AR/MR).

Nous en saurons plus sur les capacités de Reality Pro lors de son annonce officielle, probablement le 5 juin lors du discours d'ouverture de la WWDC. Si les rumeurs actuelles sont vraies, cela placera une nouvelle barre haute pour la qualité, les détails, l'immersion, l'interaction… et le prix, pouvant coûter jusqu'à 3 000 $.

J'ai écrit sur la technologie pendant toute ma vie professionnelle - plus de 25 ans. J'aime apprendre comment fonctionne une technologie complexe et l'expliquer d'une manière que tout le monde peut comprendre.