O Facebook visa dar a você superpoderes de percepção por meio de seus novos óculos de realidade aumentada. Um revolucionário Facebook experimento visa demonstrar como o som pode desempenhar um papel importante na realidade aumentada, a ponto de dar às pessoas algo que os pesquisadores da rede social chamam de “superpotências perceptivas”.
Facebook e os novos óculos de Realidade Aumentada
O Facebook Reality Labs Research (FRL Research), o laboratório de pesquisa da rede social, desenvolve há seis anos um projeto baseado em realidade aumentada e realidade virtual que busca aprimorar a comunicação humana.
Uma equipe interdisciplinar de áudio, formada por cientistas pesquisadores, engenheiros, designers, entre outros, tem a missão de criar sons virtuais perceptualmente indistinguíveis da realidade e redefinir a audição humana.
Os novos óculos de realidade aumentada do Facebook podem permitir a captura de áudio com microfones, usando pistas contextuais que são capazes de medir quais sons são importantes e transmiti-los por meio de um fone de ouvido com cancelamento de ruído.
Além disso, um som espacial melhorado poderia projetar as vozes dos participantes em uma conversa telefônica ou videochamada, aumentando a sensação de que estão com outra pessoa ou na presença de áudio.
Para conseguir isso, a equipe se concentrou em oferecer dois recursos:
Em 2017, a equipe desenvolveu sons virtuais que imitam as direções de onde os sons vêm na vida real e tecnologias de simulação acústica de alta qualidade, que tornam os ambientes virtuais mais críveis. As tecnologias impulsionaram o estado da arte em áudio espacial e potencializaram muitas das experiências atuais, como os óculos de realidade virtual Oculus Quest e a plataforma Rift.
Melhorando o áudio espacial
Uma das principais ferramentas que sustentam o trabalho é o áudio espacial, que oferece a sensação de estarmos presentes no mesmo lugar, mesmo que estejam a quilômetros de distância.
O áudio espacial imita as direções de onde os sons vêm na vida real e na acústica do ambiente, algo que pode ser uma virada de jogo para as videochamadas.
“Com um telefonema hoje, a voz da outra pessoa soa como se estivesse vindo do próprio telefone (ou do centro da sua cabeça, se você estiver usando fones de ouvido), então seu cérebro rejeita a ideia de que a outra pessoa possa estar na mesma local “, descreve Lisa Brown, gerente de tecnologias de comunicação do Facebook.
A empresa acredita que o áudio espacial pode ser combinado com Codec Avatars, representações ultra-realistas de pessoas animadas em tempo real. “Isso vai permitir quebrar a verdadeira presença social. Ao permitir que você passe mais tempo com pessoas importantes em sua vida em lugares significativos, podemos transformar radicalmente a maneira como você vive, trabalha e se diverte ”, acrescenta Brown.
Superpotências perceptivas
Por exemplo, seria possível manter uma conversa em um restaurante ou bar lotado, sem ter que levantar a voz para ser ouvido ou se esforçar para entender o que os outros estão dizendo.
Ao usar vários microfones nos óculos, é possível captar os sons do ambiente. Então, com o padrão dos movimentos da cabeça e dos olhos, podemos descobrir quais desses sons ele está mais interessado em ouvir.
“Isso nos permite aprimorar os sons apropriados e atenuar outros, garantindo que o que você realmente deseja ouvir seja claro, mesmo com ruído de fundo alto”, diz Mehra.
O objetivo da equipe é cobrir toda a gama de sons que os humanos podem ouvir, de 20 Hz a 20.000 Hz.
Atualmente, eles desenvolvem Monitores Internos Especiais (IEM), um protótipo de saída, que permite o uso de tecnologias de cancelamento de ruído ativo para reduzir efetivamente o volume de ruído de fundo indesejado.
“Quando combinamos isso com o protótipo de entrada da FRL Research, incluindo o conjunto de microfones, podemos oferecer a experiência completa dos superpoderes auditivos”, explica Brown.
