Team programmerer en humanoid robot til at kommunikere på tegnsprog

For at en robot skal kunne "lære" tegnsprog, det er nødvendigt at kombinere forskellige ingeniørområder såsom kunstig intelligens, neurale netværk og kunstigt syn, samt underaktiverede robothænder. "En af de vigtigste nye udviklinger i denne forskning er, at vi forenede to hovedområder inden for robotteknologi:komplekse systemer (såsom robothænder) og social interaktion og kommunikation, " forklarer Juan Víctores, en af ​​forskerne fra Robotics Lab i Institut for Systemteknik og Automation på UC3M.

Det første forskerne gjorde som en del af deres forskning var at indikere, gennem en simulering, den specifikke position af hver falanks for at skildre særlige tegn fra spansk tegnsprog. De forsøgte derefter at gengive denne position med robothånden, forsøger at lave bevægelser, der ligner dem, en menneskelig hånd kunne lave. "Målet er, at de skal være ens, og først og fremmest, naturlig. Forskellige typer af neurale netværk blev testet for at modellere denne tilpasning, og dette gjorde det muligt for os at vælge den, der kunne udføre bevægelserne på en måde, der er forståelig for folk, der kommunikerer med tegnsprog, " forklarer forskerne.

Endelig, forskerne bekræftede, at systemet fungerede ved at interagere med potentielle slutbrugere. "De døve, der har været i kontakt med robotten, har rapporteret 80 procents tilfredshed, så responsen har været meget positiv, " siger en anden af ​​forskerne fra Robotics Lab, Jennifer J. Gago. Forsøgene er udført med TEO (Task Environment Operator), en humanoid robot til hjemmebrug udviklet i Robotics Lab på UC3M.

Til dato, TEO har mestret fingerstavningsalfabetet af tegnsprog, samt et meget grundlæggende ordforråd relateret til husholdningsopgaver, forklarer denne forsker. En af de udfordringer, som forskerne nu står over for for at fortsætte med at udvikle dette system, er "gengivelsen af ​​mere komplekse bevægelser, ved at bruge hele sætninger", siger et andet medlem af Robotics Lab-teamet, Bartek Lukawski. Robotten kunne derefter bruges af de cirka 13, 300 mennesker i Spanien, der bruger tegnsprog til at kommunikere.

Det bredere mål er, at robotter af denne type bliver husholdningsassistenter, der er i stand til at hjælpe med strygning (TEO gør også dette), folde tøj, servering af mad, og interaktion med brugere i hjemmet. Ud over, "disse robothænder kunne implementeres i andre humanoider, og de kunne bruges i andre miljøer og omstændigheder, " siger Jennifer J. Gago. "Det virkelig vigtige er, at alle disse teknologier, alle disse udviklinger, som vi bidrager til, er rettet mod at inkludere alle medlemmer af samfundet. Det er en måde at forestille sig teknologi som en hjælp til inklusion, både af minoriteter og af flertal, i et demokrati, " understreger Juan Víctores.