Det finns nu en app som låter döva samhället utnyttja Alexa till fullo

Det finns nu en app som låter döva samhället utnyttja Alexa till fullo

Det är säkert att säga att röstassistenter har bevisat sin stämning med befolkningen i stort. Vad händer om du är en del av döva och inte kan höra svaren? Det var frågan som ställdes av Abhishek Singh, en datavetare som först blev framträdande när han byggde in augmented reality.

Han har skapat en webbapplikation som kan översätta teckenspråk både till talade ord för din röstassistent att välja och göra omvänd översättning från deras talade svar till ett typiskt svar för dem som är hörselskadade eller döva att läsa. Eftersom det fungerar på en fullständig översättning är det kompatibelt med någon av röstassistenterna, användaren behöver bara använda rätt triggerfras.

Den här appen går långt längre än den pseudolösning som Amazon Echo Show erbjuder, som låter medlemmar i döva samhället interagera med Alexa, men inte genomföra fullständiga konversationer. Lösningen som skapats av Singh åtgärdar denna brist på funktionalitet. Som Singh berättar,

Projektet var ett tankeexperiment inspirerat av att observera en trend bland företag som driver röstbaserade assistenter som ett sätt att skapa omedelbara, sömlösa interaktioner. Om dessa enheter ska bli ett centralt sätt att interagera med våra hem eller utföra uppgifter, måste man tänka på dem som inte kan höra eller prata. Sömlös design måste vara inkluderande till sin natur.

Singh utnyttjade Tensorflow, maskininlärningsplattformen, för att träna ett AI-system hur man känner igen teckenspråk. Detta var en tråkig process, där han var tvungen att skriva in varje ord i sin webbkamera för att “lära” systemet teckenspråk. Han lade sedan till Googles välpresterande text-till-tal-API för att översätta teckenspråket till talade ord.

Medan tredjepartslösningen Singh har skapat är en elegant lösning på problemet, hoppas han fortfarande att Amazon i slutändan kommer att ha inbyggda teckenspråkfunktioner utan behov av ytterligare tillägg.

Det är där jag hoppas att det här går. Och om detta projekt leder till ett tryck i den riktningen på något litet sätt, då uppdraget fullbordat. I en idealisk värld skulle jag ha byggt detta direkt på Showen, men enheterna är inte så hackbara än, [I] kunde inte hitta ett sätt att göra det.

För mer tekniska nyheter, kolla in:

https://www.purplepayday.loan/payday-loan-consolidation/