science >> Wetenschap >  >> Elektronica

De tekens herkennen

Krediet:Paul Brennan/publiek domein

Machineherkenning van gebarentalen is op de kaart dankzij het werk van een team in India dat een Microsoft Kinect-bewegingsidentificerende controller gebruikt. Schrijven in het International Journal of Computational Vision and Robotics, het team legt uit hoe hun systeem slechts 11 van de 20 gewrichten gebruikt die door een Kinect worden gevolgd en nieuwe functies per frame kan extraheren, op basis van afstanden, hoeken, en snelheid waarbij de gewrichten van het bovenlichaam betrokken zijn. Het team rapporteert hoe het algoritme 35 gebaren van Indiase tekens in realtime herkent met een nauwkeurigheid van bijna 90 procent.

Jayesh Gangrade en Jyoti Bharti van het Maunala Azad National Institute of Technology, in Bhopal, Indië, uitleggen hoeveel mensen met een significant gehoorverlies gebruikmaken van op gebaren gebaseerde communicatie, handbewegingen, en oriëntatie samen met gezichtsuitdrukking worden dynamisch gebruikt om betekenis op een genuanceerde en expressieve manier over te brengen als elk ander taaldialect. De ontwikkeling van technologie die ook bekwaam zou kunnen zijn in gebarentalen, zou degenen die op deze vorm van communicatie vertrouwen, een nieuwe benadering geven om met machines en computers om te gaan. Camera, digitale handschoenen, en andere gadgets zijn in dit verband eerder onderzocht. Echter, het potentieel van een goedkope videogamecontroller, zoals de Kinect, die lichaamsbewegingen kan volgen, zou dit snel kunnen vergemakkelijken.

Het team wijst erop dat hun aanpak geen markeringen of speciale kleding met volgobjecten vereist, zoals nodig was bij sommige van de eerdere inspanningen op dit gebied. "We hebben geëxperimenteerd met een minimale reeks kenmerken om onderscheid te maken tussen de gegeven tekens met praktische nauwkeurigheid, ", schrijft het team. Ze experimenteren nu met de Kinect v2-sensor die nauwkeuriger is en het onderzoek dichter bij zijn uiteindelijke doel zou kunnen brengen.