Vis dine hænder:Smartwatches registrerer håndaktivitet

Vi er blevet vant til, at vores smartwatches og smartphones fornemmer, hvad vores kroppe laver, det være sig at gå, køre bil eller sove. Men hvad med vores hænder? Det viser sig, at smartwatches, med et par justeringer, kan opdage overraskende mange ting, dine hænder gør.

Forskere ved Carnegie Mellon University's Human-Computer Interaction Institute (HCII) har brugt et standard smartwatch til at finde ud af, hvornår en bærer skrev på et tastatur, vaske op, kæle med en hund, hælde fra en kande eller klippe med saks.

Ved at foretage et par ændringer i urets styresystem, de var i stand til at bruge dets accelerometer til at genkende håndbevægelser og, i nogle tilfælde, bio-akustiske lyde forbundet med 25 forskellige håndaktiviteter med omkring 95 procents nøjagtighed. Og de 25 aktiviteter er kun begyndelsen på, hvad der kan være muligt at opdage.

"Vi forestiller os smartwatches som et unikt strandhoved på kroppen til at fange rigdom, hverdagsaktiviteter, " sagde Chris Harrison, adjunkt i HCII og direktør for Future Interfaces Group. "En lang række apps kunne gøres smartere og mere kontekstfølsomme, hvis vores enheder kendte aktiviteten af ​​vores kroppe og hænder."

Harrison og HCII Ph.D. studerende Gierad Laput vil præsentere deres resultater om denne nye sansefunktion på CHI 2019, Association for Computing Machinerys konference om menneskelige faktorer i computersystemer, 4-9 maj i Glasgow, Skotland. En video er tilgængelig.

Ligesom smartphones nu kan blokere tekstbeskeder, mens en bruger kører, fremtidige enheder, der registrerer håndaktivitet, kan lære ikke at afbryde nogen, mens de udfører bestemt arbejde med deres hænder, såsom at hakke grøntsager eller betjene strømudstyr, sagde Laput. At føle håndaktivitet egner sig også til sundhedsrelaterede apps – overvågning af aktiviteter som f.eks. vaske hænder eller ryge en cigaret.

Håndføling kan også bruges af apps, der giver feedback til brugere, der er ved at lære en ny færdighed, såsom at spille et musikinstrument, eller under fysisk genoptræning. Apps kan advare brugere om skrivevaner, der kan føre til gentagne belastningsskader (RSI), eller vurdere begyndelsen af ​​motoriske svækkelser, såsom dem, der er forbundet med Parkinsons sygdom.

Laput og Harrison begyndte deres udforskning af registrering af håndaktivitet ved at rekruttere 50 personer til at bære specielt programmerede smartwatches i næsten 1, 000 timer, mens de udfører deres daglige aktiviteter. Periodisk, urene ville optage håndbevægelser, håndorientering og bioakustisk information, og bed derefter bæreren om at beskrive håndaktiviteten – barbering, klapper, skrabe, tage læbestift på, osv. Mere end 80 håndaktiviteter blev mærket på denne måde, at levere et unikt datasæt.

For nu, brugere skal bære smartwatchet på deres aktive arm, snarere end den passive (ikke-dominerende) arm, hvor folk typisk bærer armbåndsure, for at systemet virker. Fremtidige eksperimenter vil undersøge, hvilke hændelser der kan detekteres ved hjælp af den passive arm.

"De 25 håndaktiviteter, vi evaluerede, er en lille brøkdel af den måde, vi engagerer vores arme og hænder på i den virkelige verden, " sagde Laput. Fremtidigt arbejde vil sandsynligvis fokusere på klasser af aktiviteter - dem, der er forbundet med specifikke aktiviteter såsom rygestop, ældrepleje, eller indtastning og RSI.