science >> Wetenschap >  >> Elektronica

Android-telefoon wordt hulpmiddel voor live gesprekken tussen dove en horende mensen

Krediet:Google

Klant:"Hallo." Barista:"Hallo. Wat kan ik voor je halen?" Klant:"Ik wil graag thee." Voor velen, dit is de meest alledaagse, vergeetbare uitwisseling tussen twee mensen. Voor degenen die beperkingen kennen voor doven en slechthorenden, de uitwisseling is nogal iets ongewoons.

Dimitri Kanevsky-onderzoeker en ingenieur Chet Gnegy hebben samengewerkt om de Android-app uit te brengen, Live transcriberen. Deze app neemt spraak op en zet deze om in realtime bijschriften met behulp van de microfoon van de telefoon.

U kunt woorden op uw Android-telefoon zien verschijnen terwijl ze worden uitgesproken. U neemt deel aan het gesprek door uw antwoord op het scherm te typen, via een type-back-toetsenbord.

De horende bevolking en de dove en slechthorende bevolking kunnen gemakkelijk gesprekken voeren. De conduit is gewoon de app op een Android-telefoon.

"We kunnen nu dingen doen die een paar jaar geleden nog niet eens mogelijk waren, zoals aan de eettafel in gesprek gaan of terloops meedoen als de gelegenheid zich voordoet, " zei Christian Vogeler, hoogleraar en onderzoeker, Gallaudet-universiteit.

De makers van de app hebben er rekening mee gehouden dat de app in meer talen dan alleen in het Engels kan worden gebruikt. Potentiële gebruikers hebben de keuze uit meer dan 70 talen en dialecten; ze kunnen nauwkeurige bijschriften verwachten in de taal die wordt gesproken.

Bedrade beschreef de app als "spraak-naar-tekst intelligentie", waarbij slechthorenden of doven "tekstrepresentaties van gesproken gesprekken kunnen ontvangen terwijl ze plaatsvinden".

Hierover is maandag een video geplaatst. "Stel je een wereld voor waar mensen die doof of slechthorend zijn, dagelijkse persoonlijke gesprekken kunnen voeren, live."

Wat zet deze show op de weg? Kanevesky, doof sinds de kindertijd, heeft meer dan een minuut gewerkt aan spraakherkenning en communicatietechnologie, wat dacht je van de afgelopen 30 jaar.

Het Live Transcribe-team begon met een vraag/uitdaging:wat als we cloudgebaseerde automatische spraakherkenning zouden gebruiken om gesproken woorden op een scherm weer te geven?

Ze bouwden een prototype. In een weblog, Brian Kernler zei dat Googlers van verschillende kantoren, van Mountain View tot Taipei, erbij betrokken raakten. Ook, Gallaudet-universiteit, de school voor doven en slechthorenden, binnen geworpen, om te controleren of Live Transcribe nuttig zou zijn voor dagelijks gebruik. De school hielp met testen en verbeteringen. Gallaudet wordt geprezen als universiteit voor doven en slechthorenden, een ideale keuze voor feedback. De programma's en diensten van de school zijn speciaal ontworpen voor dove en slechthorende studenten.

"Aan de technische kant de app vertrouwt op cloud ASR om grotere nauwkeurigheid te bieden in combinatie met een op het apparaat gebaseerde spraakdetector op basis van neurale netwerken, " zei SiliconANGLE. Het Google Play-product merkt de volgende kenmerken van de app op:(1) de gebruiker kan antwoorden zonder te spreken door antwoorden in te typen (2) er zijn optionele haptische feedbacksignalen wanneer iemand begint of hervat met spreken.

"Live Transcribe wordt geleidelijk uitgerold in een beperkte bèta voor gebruikers over de hele wereld via de Play Store en vooraf geïnstalleerd op Pixel 3-apparaten. Meld u hier aan om een ​​melding te ontvangen wanneer het op grotere schaal beschikbaar is." ( Bedrade :Live Transcribe wordt geïnstalleerd op de Pixel 3-smartphones van Google, maar anders is nu alleen beschikbaar via een bèta.)

Geheimhouding? De site zei dat gesprekstranscripties niet op servers worden opgeslagen; ze blijven veilig op uw apparaat.

Aatif Sumar, Android-politie :"Voor een app die in bèta zou moeten zijn, het werkt indrukwekkend goed. Ik had gesprekken aan de telefoon, en de app kon het meeste van wat er werd gezegd oppikken. Zelfs als de transcriptie een paar woorden miste, je zou de kern van het gesprek kunnen krijgen."

Sumar schreef over die haptische eigenschap, te. "Als het gesprek een tijdje stopt en dan weer wordt hervat, de telefoon kan trillen om u te waarschuwen."

Een interessante observatie van Lauren Goode in Bedrade :Live Transcribe gaat "minder over het helpen van een gebruiker bij het navigeren op de telefoon zelf en meer over mensen die telefoons gebruiken om door de wereld om ons heen te navigeren als we niet begraven zijn in onze telefoons."

© 2019 Wetenschap X Netwerk