Panoramafotografering af Iguazu Falls præsenteret i CRAIVE Lab. Kredit:Jonas Braasch
Forestil dig at være inde i Rensselaer Polytechnic Institute's Collaborative Research Augmented Immersive Virtual Environment Laboratory (CRAIVE Lab), som har en frontprojektion 360-graders panoramaskærm for at fordybe dig visuelt, mens 134 højttalere giver en rumligt fremragende lyd.
Kombineret med netværk af sensorer og controllere, CRAIVE Lab giver sine brugere nye former for interaktion mellem mennesker og virtuelle verdener, med oplevelser lige fra det velkendte til det ellers fjerne eller ligefrem imaginære.
Under det 178. møde i Acoustical Society of America, afholdt 2.-6. december, på Hotel del Coronado i San Diego, Jerry Huang og kolleger vil præsentere deres arbejde med at undersøge, om hardwaren til fordybende virtuelle miljøer kan gøres nemmere at transportere, mens de stadig gengiver lyd- og videopåvirkningen på tværs af en bred vifte af sammenhænge, som i skoler, kontorer eller forskningsinstitutter.
"Vi fokuserer primært på at udvikle konstruktions- og kalibreringsmetoder til accelereret montage, mere fleksible hardwarekonfigurationer, og mere effektiv kalibrering af den fordybende oplevelse, " han sagde.
Forskernes arbejde kombinerer et bølgefeltsyntesesystem med et fordybende videoprojektionssystem. "Bølgefeltsyntese er en rumlig lydteknik, der bruger et udvalgt array af højttalere til at gengive et lydfelt, " sagde Huang. "Lyden af individuelle højttalere kombineres netop for at genskabe lytteoplevelsen."
Et frontprojektionsdesign (til brede betragtningsvinkler) gør det muligt at bruge en akustisk gennemsigtig skærm, og højttalere kan placeres bag skærmen til high-fidelity lydgengivelse. Virtuelle lyde "placeres" i den virkelige verden og ser ud til at komme fra deres respektive steder i rummet.
Både CRAIVE Lab og en deployerbar panoramaopsætning, de skabte, anvender denne teknik. "Vores deployerbare panoramaopsætning kombinerer bølgefeltsyntese med et modulært design. Grupperinger af et dusin lineært arrangerede højttalere giver en skalerbar konfiguration til rum af enhver størrelse, " sagde Huang. "Disse arrays genererer lagdelte lydlandskaber, der er relevante for den tilsvarende visuelle information, engagere det visuelle, høre- og taktile sanser hos mennesker i miljøet."
Forskerne udforsker også "skalerbarheden af hardwareplatforme til fordybende miljøer, " sagde han. "Vi ønsker at minimere mængden af arbejdskraft, tid og fodaftryk, der normalt kræves til montering af sådanne infrastrukturer. Og et skalerbart design viser også potentialet for at udvikle strategier for reproduktion og hurtig prototyping."