Les champs lumineux sont un élément subtil mais essentiel pour donner à la vidéo 3D un aspect « réel », et cela n’a pas grand-chose à voir avec la résolution ou le champ de vision. Meta (anciennement Facebook) donne un aperçu d’un prototype de casque VR qui fournit une vidéo de champ lumineux à l’utilisateur pour une vue plus réaliste de son environnement, et il utilise une combinaison astucieuse d’objectif et d’ouverture pour y arriver.
Lorsque les humains bougent nos yeux (ou nos têtes, d’ailleurs) pour observer une scène, nous voyons les choses sous des angles légèrement différents dans le processus. Ces différences sont des indices importants pour que notre cerveau interprète notre monde. Mais lorsque les caméras capturent une scène, elles la capturent comme un plan plat, ce qui diffère à bien des égards de la manière dont nos yeux fonctionnent. L’une des principales raisons pour lesquelles la vidéo 3D stéréoscopique n’a pas l’air particulièrement réelle est que les informations qu’elle présente manquent de ces subtilités.
Comment est-ce connecté aux casques VR ? La fonctionnalité de passthrough vidéo de la réalité virtuelle – où l’on voit le monde réel via des caméras externes – est de plus en plus considérée comme une fonctionnalité importante, mais a des limites. Les distorsions visuelles dues au traitement logiciel en sont une, mais la transmission vidéo souffre également des mêmes problèmes que les vidéos 3D : elles n’ont tout simplement pas l’air réelles et elles n’ont pas vraiment l’air 3D. C’est plus qu’un simple problème esthétique; cela empêche d’interagir avec le monde. Cela inclut non seulement la manipulation d’objets, mais aussi des choses comme se promener sans se cogner dans les coins, ou descendre les escaliers plus rapidement que prévu.
Les champs lumineux sont le chaînon manquant pour rendre la vidéo 3D capturée par des caméras plus réelle, et une façon de capturer les champs lumineux consiste à coller tout un tas de caméras. Chaque caméra capture une scène d’un point de vue légèrement différent, et le logiciel peut traiter les données résultantes dans une vidéo à champ lumineux qui parvient à tout conférer (ou du moins la plupart) des petits détails que notre cerveau s’attend à voir.
Le prototype de passthrough de champ lumineux de Meta (le casque « Flamera », à peu près au milieu de cette page) adopte l’approche intelligente consistant à utiliser un réseau de lentilles combiné à des ouvertures pour créer une optique qui modifie la façon dont une caméra voit le monde, au lieu d’utiliser un réseau de caméras et le traitement des résultats. L’optique ressemble à une sorte d’œil composé, permettant au casque de fournir une vidéo passthrough à champ lumineux d’une qualité remarquablement supérieure aux options habituelles.
Vous voulez en savoir plus sur les champs lumineux ? Nous avons vu un travail fascinant de Google sur la vidéo sur le champ lumineux ainsi qu’une conférence passée de la superconférence Hackaday qui fait un excellent travail pour expliquer pourquoi c’est si important et comment les champs lumineux peuvent être abordés même en tant qu’amateur.
