Qu’est-ce que le « pass-through », et pourquoi tous les casques VR en sont équipés ?

Les casques VR sortis à partir de fin 2022 et maintenant en 2023 sont dotés de la technologie pass-through haute résolution en couleur et présentent des caractéristiques de réalité mixte impressionnantes. Qu’est-ce que la technologie pass-through et pourquoi, tout à coup, les casques VR en sont équipés ?

Dans cet article explicatif, nous allons couvrir :

• Qu’est-ce que lepass through vidéo en VR ?
• Le passage de la vidéo est-il identique à la réalité mixte ?
• Pourquoi les casques VR sont-ils dotés de la fonction Pass-through ?
• Quels casques VR ont une réalité mixte ?
• L’avenir de la transmission vidéo est la transmission neuronale.

Qu’est-ce que le pass-through vidéo VR ?

En bref, le pass-through vidéo sur les casques VR est un flux vidéo envoyé aux écrans à l’intérieur du casque de réalité virtuelle. Ce flux vidéo peut être en échelle de gris comme sur Meta/Oculus Quest 2 ou en couleur comme sur Pico 4.

Avant la montée en puissance de la réalité mixte à partir de la fin 2022, le pass-through vidéo permettait à l’utilisateur VR de dessiner le VR Guardian ou la zone de Tracking où le monde virtuel peut être activé en toute sécurité.

La réalité mixte du pass-through vidéo peut être activée avec une configuration à une ou deux caméras. Lorsqu’elle est réalisée à l’aide de deux caméras, on parle de pass-through vidéo stéréoscopique, qui fournit un flux vidéo par œil. De cette façon, il reflète la façon dont les humains voient, améliorant l’expérience de la réalité mixte avec une meilleure profondeur, une meilleure perception de la distance et des objets 3D moins saccadés. En bref, notre cerveau compose la façon dont nous voyons le monde à travers le chevauchement que nos deux yeux voient, ce chevauchement est appelé parallaxe, et les casques MR avec une configuration à double caméra utilisent la même méthode.

Le pass-through permet la réalité mixte

À la base, qu’il s’agisse de réalité virtuelle, augmentée ou mixte, la technologie est en passe de devenir plus petite, plus légère et d’être utilisée comme un vêtement de tous les jours. Dans cette optique, la VR est prête à combler le fossé entre VR et AR\ par le biais de pass-through vidéo haute résolution et couleur. C’est ce qu’on appelle la réalité mixte, qui offre une transition transparente entre la VR totalement immersive et la réalité mixte de la MR.

En fait, lorsque le suivi de la main et l’occlusion d’objet 3D sont utilisés, la couche numérique dans le monde réel semble faire partie de l’environnement, offrant une expérience de réalité mixte inégalée. Un des premiers casques VR à illustrer la puissance de la réalité mixte est le Lynx R1. L’utilisateur du casque VR peut alors voir son environnement en haute fidélité en le mélangeant avec des objets numériques, ce qui ouvre de nombreux cas d’utilisation.

Pourquoi les casques VR ont-ils un pass-through ?

Les casques VR sont dotés de pass-through – en dehors de la possibilité de dessiner une zone de tracking – parce que la réalité mixte offre plus de possibilités aux casques VR.

En voici quelques exemples.

Divertissement

Dans le domaine du divertissement, le porteur du VR peut remplacer son mur physique par un écran pour regarder un film. Il peut même le regarder avec sa famille, qui porte également un casque VR avec pass-through de réalité mixte.

Services de santé

Dans le domaine des soins de santé, le pass-through par RM peut créer un hologramme en temps réel des organes du patient avant une opération, augmentant ainsi l’efficacité de la chirurgie à venir. En fait, le pass-through à faible latence permet même des soins de santé décentralisés, où un chirurgien à Boston peut opérer un patient à Paris.

Architecture

Un architecte peut concevoir et dessiner un schéma virtuel en réalité virtuelle immersive, puis le réduire, en entrant de manière transparente dans la réalité mixte, pour que les ingénieurs et les décorateurs d’intérieur puissent collaborer et itérer sur le design.

Travail à distance

Dans un bureau à domicile, le travailleur peut recréer une salle de réunion professionnelle ou travailler sur plusieurs écrans virtuels simultanément à la configuration de son bureau physique.

En bref, si le pass-through vidéo est une technologie à part entière, elle est devenue synonyme de réalité mixte.

Quels casques VR ont une réalité mixte ?

L’avenir du pass-through, c’est le Neural Passthrough.

Dans le cadre de la fusion de la VR et de l’AR, nous avons eu un aperçu de ce que Meta est en train de faire au sein de Reality Labs.

Ici, outre les remarquables innovations optiques du « Principe Sandwich », Meta développe également une technologie de pass-through vidéo inverse appelée Neural Passthrough. Cette solution permet aux yeux du porteur du casque VR d’être visibles pour les personnes extérieures en utilisant le suivi des yeux et des visages par l’IA pour représenter les yeux de façon réaliste.

Cependant, pour que le pass-through de la réalité mixte devienne vraiment transparent, les casques VR doivent inclure un capteur de profondeur pour cartographier spatialement l’environnement de l’utilisateur. Comme les casques de réalité mixte actuels, tels que le Meta Quest Pro, ne disposent pas d’un capteur de profondeur, l’interaction avec les objets 3D par le biais du pass-through vidéo est instable, mais il ne fait aucun doute que la réalité mixte transparente est sur le point de devenir une réalité.