Banca de DEFESA: CASSIO COSTA ALMEIDA

Uma banca de DEFESA de MESTRADO foi cadastrada pelo programa.
DISCENTE: CASSIO COSTA ALMEIDA
DATA: 18/03/2021
HORA: 14:30
LOCAL: Universidade Federal do Delta do Parnaíba - Sistema remoto
TÍTULO: SISTEMA INTELIGENTE PARA INTERAÇÃO ENTRE OS DEFICIENTES VISUAL E AUDITIVO
PALAVRAS-CHAVES: tecnologia assistiva, surdos, cegos, linguagem de sinais, sistema de substituição sensorial
PÁGINAS: 95
GRANDE ÁREA: Outra(s)
ÁREA: Tecnologia e Inovação
RESUMO:

A comunicação desempenha um papel importante na vida cotidiana, a qual é dificultada em pessoas surdas e cegas devido às limitações relacionadas à deficiência. Embora existam sistemas de tecnologia assistiva para interação entre surdos e cegos, essas padecem de problemas como: inviabilidade econômica, em razão da quantidade de dispositivos agregados, e inflexibilidade em relação a disponibilidade dos recursos. Diante disto, a proposta desse estudo foi desenvolver um sistema (NITLabDeafBlind) para interação entre deficientes visuais e surdos que consiste em três aplicações, com interfaces para comunicação remota, usando técnicas de reconhecimento de sinais, reconhecimento e síntese da fala. Para esta proposição, foi desenvolvida uma aplicação web para reprodução e reconhecimento da Língua Brasileira de Sinais e um aplicativo móvel que reconhece e sintetiza a fala. O aplicativo móvel, usado pelo deficiente visual, capta a voz por meio do microfone do smartphone, transforma em texto e envia pela internet, então a mensagem de texto é recebida pela aplicação web, que é usada pelo surdo, e convertida em sinais gestuais. O processo inverso é realizado quando a aplicação web captura os sinais gestuais, por meio da webcam do usuário. Nesse caso o sistema transforma em texto e envia pela internet, que ao ser recebida pelo aplicativo móvel é realizada a síntese de fala. Para o desenvolvimento do sistema foi utilizado o avatar 3D da suíte VLibras e as linguagens de programação JavaScript e o framework ReactNative para aplicação móvel, e Python e Javascript, além da biblioteca Tensorflow HandPose, para o desenvolvimento da aplicação web. A qualidade do sistema foi avaliada de acordo com questionário de experiência do usuário. Os resultados mostram para classificadores de reconhecimento de sinais estáticos acurácia de 98,5% e para qualidade do sistema, valores acima da média de outros produtos no mercado. Portanto, conclui-se que o sistema NITLabDeadBlind atende à demanda de funcionalidade do qual foi proposto, em consequência, possibilita a interação entre pessoas surdas e deficientes visuais de forma remota e sem a necessidade de sensores, óculos ou luvas.

 

MEMBROS DA BANCA:
Interno - 015.753.933-44 - ARIEL SOARES TELES - IFMA
Presidente - 2092495 - SILMAR SILVA TEIXEIRA
Interno - 1761994 - VICTOR HUGO DO VALE BASTOS