Cobre o conteúdo enquanto carrega
Projeto

ENG-4278: AudioVision: uma solução de visão computacional para pessoas com deficiência visual

Ícone
ENG

Engenharia

Sub-categoria

Eletrônica

Play
ícone Autoria Abelardo Palácios Ribeiro, Pedro do Amaral, Fernando Gabriel Satolo Quelho
ícone Orientação Vinícius de Araújo Maeda
ícone Instituição IFMS - Campus Aquidauana
ícone Etapa Semifinalista

Resumo

Atualmente, a quantidade de pessoas que possuem deficiência visual vem aumentando significativamente no mundo. Dessa forma, situações em que vemos alguém tendo que cuidar de pessoas com baixa visão ou cegueira total são muito recorrentes, e o fato de não conseguirem ter acesso à informação por não terem a visão impõe diversos desafios a elas. Assim, o objetivo é criar uma tecnologia assistiva que permita que deficientes visuais possam executar suas tarefas rotineiras com uma maior autonomia e uma menor dificuldade. Este projeto de pesquisa prevê a criação de um protótipo de óculos, o qual possuirá equipamentos que permitam a captura e o processamento de imagens através de um banco de dados e, em seguida, a emissão de um áudio que contém o nome do objeto identificado. Será utilizada visão computacional para reconhecer objetos e narrar ao usuário o que está sendo reconhecido. Será utilizada também a plataforma Raspberry, a qual será responsável por conter o sistema programado em Python. Para realizar o treinamento da Inteligência Artificial, será utilizada a biblioteca OpenCV. Diversos experimentos foram feitos conectados ao computador e foram obtidos bons resultados. O primeiro protótipo do óculos foi parcialmente finalizado, possuindo uma câmera acoplada que consegue se conectar com o computador e transmitir as imagens em tempo real. Atualmente, poucos objetos conseguem ser reconhecidos, como mesas, cadeiras e pessoas, porém a emissão de áudio está funcionando no computador, apesar de ser na língua inglesa. O projeto ainda não foi finalizado e seu objetivo ainda não foi alcançado, pois espera-se conseguir conectar o protótipo do óculos à placa Raspberry, o reconhecimento de mais objetos através da visão computacional é imprescindível e possibilitar a mudança de língua pelo usuário tem que ser possível no futuro. Está sendo discutida também a possibilidade de criar um aplicativo para celular.

Palavras-chave: Visão computacional, Deficiência visual, Tecnologia assistiva

Foto do projeto