La UA dissenya la primera app que reconeix i interpreta el 80% de l'alfabet de la llengua de signes espanyola

   ALACANT, 16 Feb. (EUROPA PRESS) -

   El Grup de Robtica i Visió Tridimensional (RoViT) de la Universitat d'Alacant (UA) ha dissenyat Sign4all, la primera aplicació capa de reconéixer i interpretar en temps real el 80 per cent de l'alfabet de la llengua de signes espanyola (coneguda per les sigles LSE).

   "Es tracta d'un avan que contribueix a trencar les barreres comunicatives entre sords i odors en situacions tan quotidianes com anar a una consulta mdica o menjar en un restaurant", segons ha informat la institució acadmica en un comunicat.

   Segons l'última Enquesta de Discapacitat, Autonomia Personal i Situacions de Dependncia de l'Institut Nacional d'Estadística (INE), a Espanya hi ha 1.230.000 persones amb una discapacitat auditiva de diferent tipus i grau. D'elles, 27.300 persones empren la llengua de signes per a comunicar-se.

   Grcies a l'ús de diferents tcniques de visió per computador i d'aprenentatge profund (deep learning), la doctora en Informtica i investigadora de la UA Ester Martínez, al costat de l'estudiant de doctorat Francisco Morillas, ha desenvolupat aquesta ferramenta de baix cost amb la finalitat de poder oferir assistncia a les persones sordes quan no puguen anar acompanyats d'un intrpret.

   Sign4all, després de capturar a la persona i extraure el detall de l'esquelet dels braos i mans, codifica amb color blau la part esquerra del cos i en roig la part dreta, mantenint en tot moment l'anonimat de l'usuari.

   A partir d'aquest moment, l'aplicació tradueix el signe utilitzat per la persona sorda en temps real i, en sentit oposat, és capa de signar mitjanant un avatar virtual paraules en espanyol teclejades per la persona oient.

MBIL O TABLET

   "La idea és que tot aquest procés es puga fer després de descarregar una aplicació i utilitzar la prpia cmera del mbil o una tablet perqu puga utilitzar-se en qualsevol lloc", detalla Martínez, que ha afegit que, després de moltes proves, Sign4all "aconsegueix interpretar i reconéixer l'alfabet de la LSE amb una precisió del 80%.

   "Encara que aquest resultat es correspon amb l'alfabet dactilolgic, estem treballant en una versió amb un vocabulari específic pertanyent al camp de les tasques quotidianes on interpretar frases completes", afig.

   L'equip de treball de la UA porta mesos "entrenant" aquest nou sistema i, de manera progressiva, introdueix cada vegada més signes. Aquest projecte ha propiciat que sorgisca una collaboració amb el Grup d'Investigació de Llengua Espanyola i Llengües Signadas (GRILES) de la Universitat de Vigo, un grup amb mplia experincia en l'estudi d'aquesta llengua i el seu ús en diferents territoris.

   "Des de la Universitat de Vigo estan recaptant imatges amb intrprets i nosaltres estem processant totes eixes dades. D'aquesta manera, podem ampliar molt més rpid el vocabulari del nostre sistema de reconeixement i interpretació de la LSE i millorar el seu funcionament", apunta Ester Martínez.