Videnskab
 science >> Videnskab >  >> Elektronik

Hvorfor er billedtekster pludselig overalt, og hvordan de kom dertil

Chelle Wyatt bruger sin mobiltelefon med Otter-appen fredag ​​den 15. april 2022 i Salt Lake City. Mennesker med høretab har taget teknologi i brug for at navigere verden rundt, især da høreapparater er dyre og utilgængelige for mange. Kredit:AP Photo/Rick Bowmer

Mennesker med høretab har en ny allieret i deres bestræbelser på at navigere verden rundt:Billedtekster, der ikke er begrænset til deres tv-skærme og streamingtjenester.

COVID-pandemien forstyrrede hverdagen for mennesker overalt, men mange af dem med høretab tog den resulterende isolation særligt hårdt. "Når alle bærer en maske, er de fuldstændig uforståelige for mig," sagde Pat Olken fra Sharon, Massachusetts, hvis høreapparater var utilstrækkelige. (Et nyt cochleaimplantat har hjulpet hende meget.)

Så da hendes barnebarns bar mitzvah blev streamet på Zoom tidligt i pandemien, længe før tjenesten tilbød billedtekster, henvendte Olken sig til Otter, en app skabt til at transskribere forretningsmøder. At læse sammen med ceremoniens højttalere gjorde appen til "en enorm ressource," sagde hun.

Mennesker med høretab, en gruppe anslået til omkring 40 millioner voksne i USA, har længe taget teknologier til sig for at hjælpe dem med at finde vej i høreverdenen, fra øretrompeter fra victoriansk tid til moderne digitale høreapparater og cochleaimplantater.

Men nutidens høreapparater kan koste op mod $5.000, er ofte ikke dækket af forsikringen og virker ikke for alle. Enhederne snapper heller ikke hørbar lyd i fokus, sådan som briller straks korrigerer synet. I stedet kræver høreapparater og cochleaimplantater, at hjernen fortolker lyd på en ny måde.

Chelle Wyatt bruger sin mobiltelefon med Otter-appen fredag ​​den 15. april 2022 i Salt Lake City. Mennesker med høretab har taget teknologi i brug for at navigere verden rundt, især da høreapparater er dyre og utilgængelige for mange. Kredit:AP Photo/Rick Bowmer

"Løsningerne derude er tydeligvis ikke en model, der passer til alle og opfylder ikke behovene hos en masse mennesker baseret på omkostninger, adgang, en masse forskellige ting," sagde Frank Lin, direktør for Cochlear Center. for hørelse og folkesundhed ved Johns Hopkins University. Det er ikke kun et kommunikationsproblem; forskere har fundet sammenhænge mellem ubehandlet høretab og højere risiko for demens.

Billigere håndkøbshøreapparater er på vej. Men indtil videre er det kun omkring 20 % af dem, der kunne have gavn af høreapparater, der bruger et.

Billedtekster er derimod normalt meget nemmere at få adgang til. De har længe været tilgængelige på moderne tv-apparater og dukker oftere op i videokonferenceapps som Zoom, streamingtjenester som Netflix, sociale medievideoer på TikTok og YouTube, biografer og spillesteder med livekunst.

Chelle Wyatt beskriver, hvordan du ikke kan læbeaflæse, hvis en person bærer en maske fredag ​​den 15. april 2022 i Salt Lake City. COVID-pandemien forstyrrede hverdagen for mennesker overalt, men mange af dem med høretab tog den resulterende isolation særligt hårdt. Kredit:AP Photo/Rick Bowmer

I de seneste år har smartphone-apps som Otter; Googles livetransskribering; Ava; InnoCaption, til telefonopkald; og GalaPro, for levende teaterforestillinger, er dukket op. Nogle er rettet mod personer med høretab og bruger menneskelige anmeldere til at sikre, at billedtekster er nøjagtige.

Andre, som Otter og Live Transcribe, stoler i stedet på det, der kaldes automatisk talegenkendelse, som bruger kunstig intelligens til at lære og fange tale. ASR har problemer med nøjagtighed og forsinkelser i transskriberingen af ​​det talte ord; Indbyggede skævheder kan også gøre transskriptioner mindre nøjagtige for stemmerne fra kvinder, farvede og døve, sagde Christian Volger, professor ved Gallaudet Universitet, som har specialiseret sig i tilgængelig teknologi.

Jargon og slang kan også være en anstødssten. Men brugere og eksperter siger, at ASR har forbedret sig meget.

Pat Olken fra Sharon, Mass., demonstrerer, hvordan hun bruger Otter-appen på sin iPhone, mens hun bruger en iPad i sit hjem, i Sharon, torsdag den 14. april 2022. Mennesker med høretab har taget teknologi i brug for at navigere rundt i verden. Kredit:AP Photo/Steven Senne

Selvom de er velkomne, er ingen af ​​disse løsninger perfekte. Toni Iacolucci fra New York siger, at hendes bogklub kunne være drænende, selv når hun brugte Otter til at transskribere samtalen. Billedteksterne var ikke altid nøjagtige og identificerede ikke individuelle talere, hvilket kunne gøre det svært at følge med, sagde hun.

"Det virkede lidt," sagde Iacolucci, der mistede hørelsen for næsten to årtier siden. Efter at være kommet hjem, ville hun være så træt af at prøve at følge samtalen, at hun måtte lægge sig ned. "Det tager bare så meget energi." Hun fik et cochleaimplantat for et år siden, der har forbedret hendes evne til at høre betydeligt, til det punkt, hvor hun nu kan have en-til-en samtaler uden billedtekster. De hjælper stadig i gruppediskussioner, sagde hun.

Otter sagde i en erklæring, at den hilser feedback fra de døve og hørehæmmede samfund velkommen og bemærkede, at den nu tilbyder en betalt softwareassistent, der kan deltage i virtuelle møder og transskribere dem automatisk.

Chelle Wyatt holder sit høreapparat fredag ​​den 15. april 2022 i Salt Lake City. Mennesker med høretab har taget teknologi i brug for at navigere verden rundt, især da høreapparater er dyre og utilgængelige for mange. Kredit:AP Photo/Rick Bowmer

Transskriptionsforsinkelse kan give andre problemer - blandt dem en bekymring for, at samtalepartnere kan blive utålmodige med forsinkelser. "Nogle gange siger du:'Undskyld, jeg skal bare se på mine billedtekster for at høre'," sagde Richard Einhorn, en musiker og komponist i New York. "Det betyder ikke, at jeg ikke er klar over, at det nogle gange er besværligt for andre."

Andre problemer dukker op. Da Chelle Wyatt fra Salt Lake City gik til hendes lægekontor, var Wi-Fi der ikke stærk nok til, at transskriptionsappen virkede. "Det var fagter og at skrive ting ned og sørge for, at jeg fik en skriftlig rapport bagefter, så jeg vidste, hvad der blev sagt," sagde hun.

Biografer leverer enheder, der forstærker lyden, såvel som briller og individuelle skærme, der viser billedtekster, der passer til filmen. Men de er ikke altid behagelige og nogle gange er de ikke velholdte eller virker bare ikke. Mange mennesker med høretab vil have flere film til at vise billedtekster på det store lærred, ligesom du ville have i dit eget hjem.

  • Pat Olken fra Sharon, Massachusetts, sidder og fotograferer, mens hun bruger Otter-appen på sin iPhone i sit hjem i Sharon, torsdag den 14. april 2022. Mennesker med høretab har taget teknologi i brug for at navigere rundt i verden. Kredit:AP Photo/Steven Senne

  • Pat Olken fra Sharon, Massachusetts, sidder og fotograferer, mens hun bruger Otter-appen på sin iPhone i sit hjem i Sharon, torsdag den 14. april 2022. Mennesker med høretab har taget teknologi i brug for at navigere rundt i verden. Kredit:AP Photo/Steven Senne

  • Chelle Wyatt bærer sit høreapparat fredag ​​den 15. april 2022 i Salt Lake City. Mennesker med høretab har taget teknologi i brug for at navigere verden rundt, især da høreapparater er dyre og utilgængelige for mange. Kredit:AP Photo/Rick Bowmer

  • Chelle Wyatt bærer sit høreapparat fredag ​​den 15. april 2022 i Salt Lake City. Mennesker med høretab har taget teknologi i brug for at navigere verden rundt, især da høreapparater er dyre og utilgængelige for mange. Kredit:AP Photo/Rick Bowmer

  • Chelle Wyatt beskriver, hvordan du ikke kan læbeaflæse, hvis en person bærer en maske fredag ​​den 15. april 2022 i Salt Lake City. COVID-pandemien forstyrrede hverdagen for mennesker overalt, men mange af dem med høretab tog den resulterende isolation særligt hårdt. Kredit:AP Photo/Rick Bowmer

En ny lov, der trådte i kraft i New York City den 15. maj, kræver, at biografer tilbyder billedtekster på skærmen i op til fire visningstider pr. film hver uge, inklusive i de mest populære timer at gå i biografen - fredag ​​aftener og weekender. Hawaii vedtog en statslov i 2015, der krævede to visninger om ugen af ​​hver film med billedtekster på skærmen. AMC, den store filmkæde, siger også, at den viser nogle film med billedtekster på omkring en tredjedel af sine amerikanske biografer.

Billedtekster er også mere tilgængelige nu til liveoptrædener. Flere Broadway-teatre promoverer en smartphone-app, der undertekster live-forestillinger; der er også håndholdte individuelle enheder, der viser billedtekster. Teatrene har også et par forestillinger med "åbne billedtekster", som alle kan se.

Under pandemien betød skiftet til onlinemøder og skole, at videokonferencetjenester blev et værktøj til at overleve - men billedteksterne kom først efter et stort skub. Zoom tilføjede kun live transskription til sin gratis tjeneste i oktober 2021, men mødets vært skal aktivere dem. Google Meet var hurtigere til at gøre billedtekster tilgængelige for alle gratis i maj 2020; Microsoft Teams, en beskedapp på arbejdspladsen, gjorde det i juni.

"Vi har brug for billedtekster overalt, og vi har brug for, at folk er mere følsomme," sagde Olken. "Jo mere jeg går ind for, jo mere gavner andre mennesker."