VisiBlends, en ny tilgang til at forstyrre visuel besked

Visuelle blandinger, som forbinder to objekter i en usædvanlig, iøjnefaldende måde, er en avanceret grafisk designteknik, der bruges i reklame, marketing, og medierne for at henlede opmærksomheden på et specifikt budskab. Disse visuelle ægteskaber er designet til at fremskynde et "aha!" øjeblik i beskueren, der fatter en idé fra foreningen af ​​to billeder. For eksempel, at blande et billede af en appelsin med et billede af solen kunne formidle en drik med C -vitamin.

Mens professionelle grafiske designere er dygtige til at lave visuelle blandinger, de fleste mennesker er ikke så dygtige til at konstruere disse fantasifulde billeder. For at hjælpe ikke-professionelle med at skabe visuelle blandinger til deres nyheder og PSA'er, computerforskere ved Columbia Engineering har udviklet VisiBlends, en fleksibel, brugervenlig platform, der forvandler den kreative brainstorm-aktivitet til en søgefunktion, og muliggør en statistisk højere output af visuelt blandede billeder. VisiBlends -platformen kombinerer en række menneskelige trin eller "mikrotager" med AI og beregningsteknikker. Crowd-sourcing er en nøglekomponent i systemet, der gør det muligt for grupper af mennesker at samarbejde, enten sammen eller uden for stedet.

"Til den gennemsnitlige person, det ser ud til, at en visuel blanding kræver kreativ inspiration - en aha! øjeblik - og at der ikke er nogen præcis formel til at lave en, "siger Lydia Chilton, adjunkt i datalogi, der ledede holdet og præsenterede papiret i dag i Glasgow, Storbritannien, ved ACM CHI -konferencen 2019 om menneskelige faktorer i computersystemer, den førende internationale konference om Human-Computer Interaction. "Vi ville dekonstruere processen med at bygge visuelle blandinger og se, om der var en måde, vi kunne gøre det mere tilgængeligt for mennesker ved at koble det menneskelige element med beregningsmetoder."

Effektive visuelle blandinger er svære at lave, fordi de skal opfylde to modsatte mål:at kombinere to objekter til et og samtidig sikre, at begge objekter stadig er genkendelige. Chilton bemærkede, at mens der ikke er nogen åbenbar overfladestruktur for visuelle blandinger, mange har en fælles abstrakt struktur, de kombinerer to objekter med en lignende form. Efter at have analyseret hundredvis af blandinger, teamet besluttede sig for en tilgang baseret på principper for genkendelse af menneskelige visuelle objekter. Folk bruger mange forskellige visuelle funktioner på forskellige stadier til at genkende et objekt, inklusive objektets enkle 3D-form, silhuet, dybde, farve, og detaljer.

Form er den vigtigste funktion, folk bruger til at genkende et objekt; for det andet vil de bruge farve eller detaljer. Ved at kombinere objekter baseret på delt form, derefter blande deres farver eller detaljer, man kan sende folks visuelle systemer modstridende beskeder om, hvad objektet er. De modstridende budskaber er det, der får seerne til at kigge på objektet for at finde ud af, hvad det er.

VisiBlends -processen begynder med, at brugerne finder to vigtige begreber ud fra den besked, de vil knytte til blandingen. For eksempel, til annoncekonceptet, der parrer McDonald's og "sunde, "brugere kunne vælge et æble og en hamburger som de to begreber, der skulle blandes. Til overskriften" Fodbold farligt for ungdomsudvikling, "brugere kunne vælge" fodbold "og" farligt "som de to begreber, der skal blandes. Begreberne skal være brede nok, så der er tilstrækkelig variation i symbolerne til at finde kampe, og hvis ikke, brugerne skal muligvis brainstorme for at udvide begreberne.

Efter brainstorming af associationer til konceptet, brugere skal finde billeder af objekter, der visuelt repræsenterer konceptet i enkle, ikoniske måder, og derefter skal kommentere billeder for deres form og dækning. Når brugerne har en samling af annoterede billeder til begge begreber, computere bruges til automatisk at matche billeder og syntetisere dem til blandinger baseret på designmønsteret.

Efter at blandingerne er blevet syntetiseret, brugere kan evaluere resultaterne. Hvis der ikke er nogen vellykkede blandinger, processen skal gentages for at refokusere brainstormingen for at finde flere symboler. Selvom denne iterative designproces ofte medfører nye begrænsninger, fleksibiliteten i arbejdsgangen giver brugerne mulighed for let at tilpasse ved at flytte mellem opgaver og se deres samarbejdspartneres arbejde.

Chilton og hendes team, som omfattede hendes ph.d. studerende Savvas Petridis og Maneesh Agrawala, Forest Baskett -professor i datalogi og direktør for Brown Institute for Media Innovation ved Stanford University, spekulerede på, om det ville hjælpe nybegyndere med at lave bedre visuelle blandinger. For at teste dette, de kørte en kontrolleret undersøgelse for at sammenligne, hvor mange succesrige blandinger nybegyndere kan lave med og uden VisiBlends.

I undersøgelsen, VisiBlends producerede 10 gange så mange kreative resultater som ikke -guidede brainstorming -sessioner. Brugere af VisiBlends havde en 96% succesrate, i modsætning til en sats på 21% uden at bruge systemet. Forskerne fandt også ud af, at systemet gjorde det let for grupper beliggende forskellige steder at generere kollaborative blandinger i uafhængige mikrotasker og for grupper placeret i et område for at arbejde sammen om blandede billeder.

”Det var virkelig spændende, "Chilton siger, "for at se, at brugen af ​​vores VisiBlends -værktøj dramatisk øgede antallet af vellykkede visuelle blandinger."

VisiBlends tager den generelle designproces og skræddersyr den til et specifikt problem, baseret på et designmønster. "Men designprocessen og ideen om designmønstre er meget bred", Chilton observerer. "Vi arbejder nu på at skabe fleksible arbejdsgange for andre problemer ved at forstå, hvilke komponenter der ligger til grund for løsningen, og hvilket abstrakt designmønster bedst kan beskrive, hvordan disse komponenter passer sammen. F.eks. mange kreative opgaver har mønstre - historier har plots som heltens rejse, musik har akkordprogressioner, matematiske beviser har bevisteknikker, software har designmønstre, og selv akademiske artikler har en abstrakt struktur, som rådgivere giver videre til studerende. "

Der var ikke noget eksisterende designmønster for visuelle blandinger, så teamet måtte skelne mønsteret ved at se på eksempler og teste teorier. De opdagede, at at finde designmønstre, de havde brug for at ignorere detaljer på overfladeniveau og fokusere på de elementer, der er mere fundamentale for menneskelig erkendelse. "Til visuelle blandinger, form var vigtig for en blanding, "Tilføjer Chilton." For et domæne som overbevisende skrivning, psykologiske principper for følelsesmæssige tilstande kan være nøgleelementerne i et designmønster. "

Chilton undersøger nu, hvordan hun kan udvide sin tilgang til andre kreative designproblemer, undersøge, hvordan hendes team kan finde forbindelser mellem to forskningsfelter og blande dem til ét for at skabe nye resultater og fremskynde tværfaglig forskning. Chilton bemærker, at mange overraskende resultater videnskabelige resultater i historien er kommet fra at tage en eksperimentel teknik inden for et felt, ligesom fysik, og anvende det på et andet felt, som datalogi, hvilket er en del af hvor dyb læring skete.

"Virkningerne af blandingsfelter kan være enorme, men indtil videre, de sker for det meste ved et uheld, "siger hun." Vi kan gøre videnskabelig udveksling og opdagelse mere systematisk og fremskynde opdagelseshastigheden. "