As novas ferramentas de áudio da Meta prometem sons mais naturais e localizáveis ​​em VR e AR

As novas ferramentas de áudio da Meta prometem sons mais naturais e localizáveis ​​em VR e AR, de gritos distantes a sussurros em seu ouvido.
Em 7 de fevereiro, a Meta adicionou recursos de áudio imersivos à sua plataforma de presença proprietária.O novo “XR Audio SDK” visa tornar mais fácil para os desenvolvedores integrarem áudio espacial e localizável.Atualmente, funciona apenas com o mecanismo Unity, amplamente utilizado em VR.O suporte para Unreal Engine, Wwise e FMOD está planejado.
A Presence Platform é um conjunto de ferramentas de desenvolvimento e APIs que permitem experiências manuais, de voz e de realidade aumentada com o Quest 2 e o Quest Pro.Uma adição recente no outono de 2022 é o Motion SDK para rastreamento de rosto, olhos e corpo.A plataforma será lançada pela primeira vez no outono de 2021.
As aplicações para novas experiências de áudio imersivas incluem realidade virtual, realidade aumentada e realidade mista.Para o headset mais recente, o Quest 2 e o Quest Pro VR da Meta adicionam CGI ao vídeo da câmera frontal.Além dos metadevices, o novo SDK de som também oferece suporte a “praticamente qualquer dispositivo VR móvel autônomo”, bem como VR de computador (como Steam VR) e dispositivos de terceiros.
Novos recursos incluem manipulação aprimorada de efeitos de filtragem de cabeça, ouvido externo e torso que podem afetar muito o som real: a função de transferência relacionada à cabeça (HRTF) foi projetada para simular com precisão a percepção do som real.Sem ele, os sons em seu ambiente não soarão naturais.
A modelagem acústica da sala se beneficia das reflexões e reverberações do som, que dependem do tamanho, forma e materiais da superfície da sala.Portanto, se você começar a jogar um jogo AR em um escritório vazio, a voz do inimigo virtual pode ricochetear nas paredes como a sua.Esta uniformidade de som destina-se a aumentar o efeito de presença.
Os recursos Spatial Audio Rendering e Room Acoustics são baseados no Oculus Spatializer anterior e continuarão a evoluir.A Meta disse em seu blog de desenvolvedor que o sistema é mais adequado para uso em realidade virtual do que os sistemas de áudio integrados de mecanismos de jogos populares, projetados principalmente para consoles e PCs.
O novo Audio SDK oferece flexibilidade e facilidade de uso.De acordo com a Meta, mesmo desenvolvedores sem experiência em áudio podem mixar áudio, o que é essencial para a imersão.
Por exemplo, a Meta mostrou seu uso do escritório virtual Horizon Workrooms e do aplicativo de conferência para Quest 2 e Quest Pro no evento Connect em outubro de 2022. Uma cena na mesa de negociações em que vozes de diferentes direções são essenciais para um entendimento comum confiável.
O Oculus Spatializer anterior continuará a ser suportado no Unreal Engine, FMOD ou Wwise, e para aqueles que preferem sua própria solução de API.Atualmente, a Meta não recomenda a atualização nessas áreas.
Para novos projetos no Unity Engine, a Meta recomenda o uso do novo “XR Audio SDK” para melhorar a manutenção de aplicativos a longo prazo ou para experimentar recursos experimentais.
Instruções e exemplos podem ser encontrados na documentação oficial “XR Audio SDK” e no Meta Developer Center.
Nota: Links para lojas online em artigos podem ser chamados de links de afiliados.MIXED recebe uma comissão do vendedor se você comprar através deste link.O preço permanece o mesmo para você.