| |
| Acadêmico(a): Júlio César Batista |
| Título: SIGNA: UMA APLICAÇÃO PARA ENSINO-APRENDIZAGEM DA LIBRAS |
| |
| Resumo: |
| Este trabalho apresenta o desenvolvimento de uma aplicação para auxílio no ensino-aprendizagem da Língua Brasileira de Sinais utilizando o dispositivo Leap Motion. O reconhecimento de sinais é feito em tempo real utilizando algoritmos de aprendizado de máquina para classificar as características extraídas das mãos do usuário utilizando o Leap Motion. Esses algoritmos utilizam uma base de dados de amostras inicial que pode ser expandida pelos usuários. O framework Accord.NET foi utilizado para providenciar implementações dos algoritmos de aprendizado de máquina e o reconhecimento em tempo real foi feito utilizando WebSocket com o framework ASP.NET SignalR. Foram realizados testes para verificar o desempenho e a usabilidade da aplicação. A partir dos testes de desempenho foi possível perceber que a aplicação pode ser utilizada para reconhecimento de sinais em tempo real, sendo que testes de validação cruzada apresentaram 86% de precisão no reconhecimento de sinais. A partir de testes de usabilidade foi possível perceber que a aplicação pode ser utilizada para o auxílio no ensino-aprendizagem básico da Língua Brasileira de Sinais. No entanto, a aplicação ainda apresenta limitações com sinais que apresentam características semelhantes, expressão facial e quando demonstram oclusão dos dedos para o Leap Motion. |
| |
|
