Facebook vise à vous donner des super pouvoirs perceptifs grâce à ses nouvelles lunettes de réalité augmentée. Un révolutionnaire Facebook L’expérimentation vise à démontrer comment le son pourrait jouer un rôle important dans la réalité augmentée, au point de donner aux gens ce que les chercheurs du réseau social appellent des «superpuissances perceptives».
Facebook et les nouvelles lunettes de réalité augmentée
Facebook Reality Labs Research (FRL Research), le laboratoire de recherche du réseau social, développe depuis six ans un projet basé sur la réalité augmentée et la réalité virtuelle visant à améliorer la communication humaine.
Une équipe audio interdisciplinaire, composée de chercheurs, d’ingénieurs, de concepteurs, entre autres, a pour mission de créer des sons virtuels qui ne se distinguent pas perceptiblement de la réalité et de redéfinir l’audition humaine.
Les nouvelles lunettes de réalité augmentée de Facebook pourraient permettre la capture audio avec des microphones, en utilisant des indices contextuels capables de mesurer les sons importants et de les transmettre via un casque avec suppression du bruit.
De plus, un son spatial amélioré pourrait projeter les voix des participants dans une conversation téléphonique ou un appel vidéo, augmentant ainsi le sentiment qu’ils sont avec une autre personne ou en présence d’audio.
Pour y parvenir, l’équipe s’est concentrée sur l’offre de deux capacités:
En 2017, l’équipe a développé des sons virtuels qui imitent les directions d’où proviennent les sons dans la vie réelle et des technologies de simulation acoustique de haute qualité, qui rendent les environnements virtuels plus crédibles. Les technologies sont à la pointe de la technologie en matière d’audio spatial et alimentent de nombreuses expériences d’aujourd’hui, telles que les lunettes de réalité virtuelle Oculus Quest et la plate-forme Rift.
Améliorer l’audio spatial
L’un des principaux outils qui soutient le travail est l’audio spatial, qui offre le sentiment d’être présent au même endroit, même s’ils sont en fait à des kilomètres l’un de l’autre.
L’audio spatial imite les directions d’où proviennent les sons dans la vie réelle et l’acoustique ambiante, ce qui pourrait changer la donne pour les appels vidéo.
«Avec un appel téléphonique aujourd’hui, la voix de l’autre personne semble provenir du téléphone lui-même (ou du centre de votre tête, si vous portez des écouteurs), donc votre cerveau rejette l’idée que l’autre personne pourrait être dans la même situation », décrit Lisa Brown, responsable des technologies de la communication chez Facebook.
La société pense que l’audio spatial peut être combiné avec des avatars de codec, des rendus ultra-réalistes de personnes animées en temps réel. «Cela permettra de briser la vraie présence sociale. En vous permettant de passer du temps avec les personnes importantes de votre vie dans des endroits significatifs, nous pouvons transformer radicalement votre façon de vivre, de travailler et de jouer », ajoute Brown.
Superpuissances perceptives
Par exemple, il serait possible de poursuivre une conversation dans un restaurant ou un bar bondé, sans avoir à élever la voix pour être entendu ou à faire un effort pour comprendre ce que les autres disent.
En utilisant plusieurs microphones sur les lunettes, il est possible de capturer les sons de l’environnement. Ensuite, avec le schéma des mouvements de la tête et des yeux, nous pouvons découvrir lequel de ces sons il est le plus intéressé à entendre.
«Cela nous permet d’améliorer les sons appropriés et d’atténuer les autres, en nous assurant que ce que vous voulez vraiment entendre est clair, même avec un bruit de fond fort», dit Mehra.
L’objectif de l’équipe est de couvrir toute la gamme des sons que les humains peuvent entendre, de 20 Hz à 20 000 Hz.
Actuellement, ils développent des moniteurs internes spéciaux (IEM), un prototype de sortie, qui permet l’utilisation de technologies d’annulation active du bruit pour réduire efficacement le volume du bruit de fond indésirable.
«Lorsque nous combinons cela avec le prototype d’entrée de FRL Research, y compris le réseau de microphones, nous pouvons offrir l’expérience complète des superpuissances auditives», explique Brown.
