Modernisering af first responder-træning med VR og talegenkendelse

Med over 60 millioner amerikanske voksne ejer en smart højttaler, menneske-til-maskine samtale er stort set blevet en del af et dagligt ritual. Selvom disse udvekslinger tilsyneladende er enkle for brugeren, den komplekse teknologi, der understøtter interaktionerne, er drevet af kunstig intelligens, maskinelæring, og talegenkendelse. Disse moderne maskiner fortsætter kun med at vokse i popularitet, og for mange amerikanere, stemmegenkendelsesteknologi er ved at blive lige så naturlig som at eje en smartphone. De brugergrænseflader, der driver funktionaliteten af ​​smarte højttalere, har bragt ny og forbedret bekvemmelighed til nutidens amerikanere. Af samme grund, denne kapacitet har potentialet til at lette byrderne fra operationerne af vores nations første responders.

Emnet for PSCR-prismodtageren Health Scholars' projekt er at bringe lignende stemmestyrede brugergrænseflader til Public Safety for at øge træningens effektivitet. For offentlige sikkerhedsafdelinger, træningsøvelser kan være tidskrævende, kostbar, og arbejdskrævende. Health Scholars-projektet er beregnet til at bringe erfaringsbaseret træning til førstehjælpere på en skalerbar, tilgængelig, og overkommelig måde med innovative teknologier. Deres projekt er designet til at undersøge brugen af ​​virtual reality-træning (VR) til offentlig sikkerhed ved at fokusere på en af ​​de mest naturlige ting, som førstehjælpere gør:at tale.

Fordelene ved VR

Health Scholars er fokuseret på at genskabe Advanced Cardiac Life Support (ACLS) træning for førstehjælpere gennem brug af VR og talegenkendelsesteknologier. Denne akutte hjertetræning er en certificering, som sundhedspersonale med speciale i akuttjenester skal forny hvert andet år, akkrediteret af American Heart Association. "Nød- og brandmyndigheder skal levere ACLS-træning hvert år, " forklarer Chris Ingwalson, "og de gør det alle ret ens. Det kræver, at et helt hold er offline en hel dag, ofte på deres fridag. For et mellemstort brandvæsen, der kan ligne 20 paramedicinere og fire instruktører for en hel dag, som koster mange penge og er meget arbejdskrævende."

For at bekæmpe den høje tid, arbejdskraft, og finansielle omkostninger forbundet med den traditionelle simulationstræning, Health Scholars designede en virtuel, hjemmemiljø beregnet til at genskabe et hjerte-lunge-nødopkald, giver en lav pris, et let anvendeligt alternativ. VR-teknologi giver en unik mulighed for offentlig sikkerhed, da den tillader fordybende, gentagelig, og målbare træningsscenarier for førstehjælpere. "Vi har grundlæggende lavet en simulering af en ACLS-færdighedseksamen, ", forklarer Ingwalson. Effektiv gentagelse af et offentligt sikkerhedsscenarie til træningsformål kan være vanskeligt at udføre, fordi mange nødberedskabsscenarier er høje stress- og tidsfølsomme. VR kan tjene som et potentielt værktøj til at simulere højtrykssituationer på en realistisk og fordybende måde og samtidig opretholde en lav pris.

Stemmestyret træning

I Health Scholars virtuelle scenarie, brugere bærer et VR-headset og taler ind i den indbyggede mikrofon for at lede et hold virtuelle avatarer gennem et hjertestop. Udnyttelse af stemmegenkendelse og motion capture-teknologier, brugere kan kommandere deres virtuelle teammedlemmer til at chokere, udføre hjerte-lunge-redning (HLR), og administrere medicin. "Vores brugergrænseflade er fuldstændig stemmedrevet, og simuleringen kræver ingen håndbetjening eller nogen form for klikhandlinger. Det er en måde, hvorpå vores applikation skiller sig ud, og det er også en måde, hvorpå førstehjælpere nemt kan forstå og bruge teknologien uden at være bange for teknologibarrieren i VR, " forklarer Ingwalson.

Med dette VR-baserede træningsmodul, Health Scholars forestiller sig en uddannelse oprettet i en offentlig sikkerhedsstation, giver førstehjælpere mulighed for at planlægge deres træning i deres fritid. Ingwalson udtaler; "Fordelen er, at træningen kan gennemføres på stedet, og når det er mest bekvemt for den lærende. Agenturer kan spare penge og stadig give instruktørerne og de ansvarlige for træningen en standardiseret måde at gennemføre den og vurdere præstationer på." Ud over tids- og omkostningsfordelene, Ingwalson taler også om den unikke fordel for små, landdistrikterne agenturer. "Landdistrikterne har en tendens til at have mindre opkaldsvolumen. Så, paramedicinere kan gå et par måneder uden at se en hjertenødsituation. For disse agenturer, VR-træning er en overkommelig pris til at levere genopfriskningstræning og sikre, at kompetencerne vedligeholdes."

Offentlige sikkerhedspartnerskaber og advokater

Health Scholars samarbejdede med Clear Creek EMS, Arvada Brandbeskyttelsesdistrikt, og Thornton Police Department for at sikre, at deres produkt ville være nyttigt og nyttigt for førstehjælpere. "Vores partnere har givet os en enorm mængde retning som fageksperter, " Ingwalson forklarer, "De har også hjulpet os med spørgsmål om design og brugervenlighed samt data til træning af vores stemmeoversættelsesmaskine." Health Scholars' præsident er en skadestuelæge; så, holdet begyndte oprindeligt at tackle deres applikationsdesign fra et hospitalsperspektiv. Imidlertid, gennem prisen for Public Safety Innovation Accelerator Program User Interface (PSIAP-UI), Health Scholars arbejdede tæt sammen med førstehjælpere for at skræddersy deres produkt til de særlige behov i en offentlig sikkerhedsanvendelse. "Deres opmærksomhed på detaljer i forbindelse med oprettelsen af ​​denne app var langt ud over, hvad vi forventede; hvis vi ikke havde vundet prisen, havde vi måske ikke haft den fagekspertise, vi havde brug for, eller endt med disse fantastiske partnerskaber og fortalere inden for first responder-verdenen - det er en kæmpe fordel for os."

PSIAP-UI-prisen gav Health Scholars en enestående mulighed for at teste deres idé om at bruge stemmeteknologi til forbedret brugervenlighed. "Hvis vi ikke havde vundet prisen for at udforske stemmeteknologien, Jeg tror, ​​vi kunne have gået en traditionel vej for at bruge håndkontrollere. PSIAP-UI-prisen gav os mulighed for at teste, hvad vi troede ville være en bedre brugervenlighedsbeslutning, og det beviste vi, at det var." Health Scholars sikrede serie B-finansiering på et beløb på $17 millioner, som vil give dem mulighed for at fortsætte med at udvide deres teknologiapplikationer til sundheds- og offentlig sikkerhedspersonale. "PSCR gjorde en kæmpe forskel for os, vi syntes stemmeteknologi var interessant, men det var vanskeligt og dyrt. PSCR gav os mulighed for at komme over omkostningshindringen og bevise over for os selv og markedet, at det virkelig kan fungere."

Denne historie er genudgivet med tilladelse fra NIST. Læs den originale historie her.