Intuitionens rolle i musikpræstation

Emilia Gómez, en forsker ved Musical Technology Research Group (MTG) ved Institut for Information og Kommunikationsteknologier (DTIC) på UPF, har forsøgt at skabe nye digitale tilgange til at berige oplevelsen af ​​en klassisk musikkoncert før, under og efter selve koncerten, for at bringe klassisk musik til et nyt publikum på en innovativ måde via teknologi.

"En af de applikationer, vi undersøgte i konteksten efter koncerten, var en form for facilitet, hvor brugeren påtager sig rollen som dirigent, så deres bevægelser 'dirigerer' et virtuelt orkester. Denne type faciliteter har været vellykket på steder som f.eks. Musikhuset i Wien, "siger Álvaro Sarasúa, første forfatter til en undersøgelse, der blev offentliggjort den 25. februar i tidsskriftet Grænser i digitale humaniora , ledet af Emilia Gómez.

I interaktion mellem mennesker og computere, grænseflade metaforer giver brugerne en måde at interagere med maskinen, der ligner en kendt aktivitet. Disse metaforer er meget udbredt i digitale musikinstrumenter. I dette studie, forfatterne brugte dirigentmetaforen. Interessen for at bruge disse metaforer er, så brugeren, i en virtuel facilitet, hvor man kan styre tempoet og dynamikken, hvor et orkester spiller, kan anvende deres viden eller deres tidligere intuition om, hvordan en bestemt aktivitet fungerer i den virkelige verden - i dette tilfælde, dirigerer et orkester.

"Forskningsmæssigt set, i dette studie, vi var interesserede i at bestemme, hvordan intuitive forestillinger, der er tilgængelige for brugere af denne form for faciliteter, eksplicit kan bruges af systemet til at reagere på deres gestus om at dirigere et orkester mere intuitivt, og derfor, kan give en mere udtryksfuld præstation, "siger Sarasúa.

I projektets indledende faser, forskerne gennemførte observationsstudier, hvor de bad folk med forskellige grader af musikalsk træning om at lytte til flere uddrag af klassisk musik og derefter, mens musikken spillede igen, at foretage kropsbevægelser, de ville foretage, mens de dirigerede et orkester for at kommunikere forskellige aspekter såsom tempo og intensitet. De registrerede deltagernes bevægelser ved hjælp af et Kinect -kamera, som registrerede placeringen af ​​forskellige dele af kroppen.

Forskellige fortolkningstendenser observeret

Analyse af disse data afslørede forskellige tendenser mellem emner. På den ene side, at kommunikere tempoet i musikken, der var mennesker, der konsekvent kommunikerede beat noget foran tempoet i musikken, mens andre gjorde det i total synkronisering eller med en vis forsinkelse. Med hensyn til den dynamik, som instrumenterne spillede med, nogle mennesker havde en tendens til at bevæge sig mere energisk under de forte dele, mens andre simpelthen løftede armene mere.

"Vores starthypotese for denne undersøgelse var, at et system, der gør det muligt at kontrollere tempoet og volumenet for et musikstykke ved bevægelser, der efterligner en dirigent, kan være mere intuitivt, hvis det kan tilpasses disse personlige tendenser, "forklarer Sarasúa

"I eksemplet på vores eksperiment, der er en 'implicit' fordel ved at bruge metaforen, ved at fortælle brugeren, at de skal 'dirigere' orkestret, de ved, at de skal bevæge deres arme og have en vis intuition med hensyn til deres evne til at kontrollere tempo og dynamik. Ved hjælp af det foreslåede system, denne forbedring er mere eksplicit ved, at systemet observerer og analyserer, hvad brugeren fornemmer, at de skal gøre og tilpasser sig til at udføre i henhold til disse intuitioner. "

Forfatterne omtaler denne strategi som kortlægning ved observation, siden kortlægning, eller den måde, hvorpå brugerens bevægelser er forbundet med den resulterende musik, tilpasser sig specifikt til hver bruger ved at observere, hvad de gør, når de bliver bedt om at udføre bevægelser, der efterligner en leder uden at give nogen specifikke instruktioner.

Ved evaluering af systemet, forskerne observerede 24 deltagere, der først udførte med et baseline -system, der ikke tilpassede sig til hver bruger, og derefter et system baseret på kortlægningsstrategien, og sammenlignede resultaterne. Denne sammenligning blev udført i en kontekst, hvor brugerne lærte at "dirigere" det virtuelle orkester gennem øvelse. De to systemer blev sammenlignet på grundlag af objektive og subjektive målinger på en række opgaver, hvor deltagerne skulle få orkestret til at spille i forskellige bind og gøre det synkront med metronom i forskellige tempo.

Brugervenligheden af ​​det skræddersyede system er bedre

Resultaterne af eksperimentet viste, at brugervenligheden af ​​det skræddersyede system er bedre, både med hensyn til at give mere intuitiv kontrol over den dynamik, som brugeren dirigerer orkestret med, og med hensyn til at have mere præcis kontrol over tempoet. Desuden, resultaterne viser også en stærk sammenhæng mellem foranstaltninger, der kan trækkes ud fra de data, der bruges til at foretage den tilpasning og forbedring, der indføres af systemet, hvilket indikerer, at det på forhånd er muligt at estimere, i hvilket omfang en bestemt brugers spontane bevægelser virkelig vil være nyttige til at tilpasse systemet til deres stil.

Resultaterne af denne undersøgelse er særlig relevante i sammenhænge, ​​hvor interaktion er designet ud fra brug af grænseflademetaforer, som det er tilfældet med dirigenten i et orkester. "I eksemplet på vores eksperiment, der er en "implicit" fordel ved at bruge metaforen, ved at fortælle brugeren, at de skal "dirigere" orkestret, de ved, at de skal flytte deres arme og have en vis intuition med hensyn til at kontrollere tempo og dynamik. Ved hjælp af det foreslåede system, denne forbedring er mere 'eksplicit' ved, at systemet observerer og analyserer, hvad brugeren fornemmer, at de skal gøre og tilpasser sig til at udføre i henhold til disse intuitioner, "konkluderer forfatterne.