Sonido 3D mediante realidad aumentada en interpretación polifónica

Abstract

Orquesta de Realidad Aumentada con sonido 3D. Se ha configurado un servidor local Apache mediante scripts en lenguaje PHP y Python que procesa cualquier archivo MIDI y devuelve archivos de audio en .WAV, uno por cada instrumento. A continuación, se ha realizado un proyecto en Unity utilizando VuforiaEngine capaz de transformar esos archivos de audio 2D a sonido 3D, y reproducirlos asociados a instrumentos en un escenario en el que el oyente es una AR Camera. De esta forma se puede simular como escucharía el usuario un concierto o una orquesta sinfónica, en los cuales se reciben varias fuentes de sonido desde distintas localizaciones.

Augmented Reality Orchestra with 3D sound. A local Apache server has been configured using PHP and Python scripts. This server processes any MIDI file and returns audio files in .WAV, one for each instrument. Then, a project has been made in Unity using VuforiaEngine and this is able to transform these 2D audio files to 3D sound. These audio files have a associated instrument in a scenario where the listener is an AR Camera. In this way, it is possible to simulate how the user would listen to a concert or a symphony orchestra, in which several sound sources are received from different positions.