Om een ​​robot gebarentaal te laten 'leren', het is noodzakelijk om verschillende technische gebieden te combineren, zoals kunstmatige intelligentie, neurale netwerken en kunstmatige visie, evenals onvoldoende geactiveerde robothanden. "Een van de belangrijkste nieuwe ontwikkelingen van dit onderzoek is dat we twee belangrijke gebieden van robotica hebben verenigd:complexe systemen (zoals robothanden) en sociale interactie en communicatie, " legt Juan Víctores uit, een van de onderzoekers van het Robotics Lab van de afdeling Systems Engineering and Automation van de UC3M.

Het eerste wat de wetenschappers deden als onderdeel van hun onderzoek was aangeven, door middel van een simulatie, de specifieke positie van elke falanx om bepaalde tekens uit de Spaanse Gebarentaal weer te geven. Vervolgens probeerden ze deze positie te reproduceren met de robothand, proberen de bewegingen vergelijkbaar te maken met die van een menselijke hand. "Het doel is dat ze vergelijkbaar zijn en, bovenal, natuurlijk. Verschillende soorten neurale netwerken werden getest om deze aanpassing te modelleren, en hierdoor konden we degene kiezen die de gebaren kon uitvoeren op een manier die begrijpelijk is voor mensen die communiceren met gebarentaal, ', leggen de onderzoekers uit.

Eindelijk, de wetenschappers bevestigden dat het systeem werkte door interactie met potentiële eindgebruikers. "De dove mensen die in contact zijn geweest met de robot melden 80 procent tevredenheid, dus de reacties waren zeer positief, " zegt een andere van de onderzoekers van het Robotics Lab, Jennifer J. Gago. De experimenten zijn uitgevoerd met TEO (Task Environment Operator), een humanoïde robot voor thuisgebruik ontwikkeld in het Robotics Lab van de UC3M.

Daten, TEO beheerst het vingerspellingalfabet van gebarentaal, evenals een zeer elementaire woordenschat met betrekking tot huishoudelijke taken, legt deze onderzoeker uit. Een van de uitdagingen waarmee de wetenschappers nu worden geconfronteerd om dit systeem te blijven ontwikkelen, is "het weergeven van complexere gebaren, volledige zinnen gebruiken", zegt een ander lid van het Robotics Lab-team, Bartek Lukawski. De robot kan dan worden gebruikt door de ongeveer 13, 300 mensen in Spanje die gebarentaal gebruiken om te communiceren.

Het bredere doel is dat dit soort robots huishoudelijke hulpen worden die kunnen helpen met strijken (TEO doet dit ook), kleding opvouwen, eten serveren, en interactie met gebruikers in huiselijke omgevingen. In aanvulling, "deze robothanden kunnen worden geïmplementeerd in andere mensachtigen en ze kunnen worden gebruikt in andere omgevingen en omstandigheden, ", zegt Jennifer J. Gago. "Het belangrijkste is dat al deze technologieën, al deze ontwikkelingen waar wij aan bijdragen, zijn gericht op het betrekken van alle leden van de samenleving. Het is een manier om technologie te zien als een hulpmiddel voor inclusie, zowel van minderheden als van meerderheden, binnen een democratie, " benadrukt Juan Víctores.