Codificação de imagens em sinais táteis através de redes neurais convolucionais
Carregando...
Arquivos
Tipo
Tese
Data de publicação
2020-02-06
Periódico
Citações (Scopus)
Autores
Ribani, Ricardo
Orientador
Marengoni, Maurício
Título da Revista
ISSN da Revista
Título de Volume
Membros da banca
Silva, Leandro Augusto da
Correa, Ana Grasielle Dionisio
Concilio, Ilana de Almeida Souza
Escarpinati, Maurício Cunha
Correa, Ana Grasielle Dionisio
Concilio, Ilana de Almeida Souza
Escarpinati, Maurício Cunha
Programa
Engenharia Elétrica
Resumo
Este trabalho apresenta a criação de um sistema de substituição sensorial de visão através de um colete com atuadores vibrotáteis posicionados nas costas do usuário. Foi realizada uma pesquisa sobre substituição sensorial e teoria da plasticidade, visando entender melhor a capacidade adaptativa do cérebro e como, na ausência da visão, as informações normalmente processadas por esse sentido podem ser codificadas por meio do tato. Em complemento ao hardware desenvolvido, também foi criado um sistema para codificação
de imagens em sinais táteis utilizando redes convolucionais. Além de testes iniciais com modelos de classificação e detecção de objetos, foram avaliados dois métodos novos para codificação de imagens em sinais táteis por meio de redes neurais convolucionais, um bag of convolutional features (BoF) eum vector of locally aggregated descriptors (VLAD). Nesse trabalho, também é apresentado um método totalmente novo para avaliar a propriedade semântica do sinal codificado, baseando-se na ideia de que objetos parecidos devem gerar sinais parecidos na interface tátil. Foi criada a métrica de semantic property evaluation (SPE). Utilizando essa métrica,foi demonstrada a vantagem de utilizar os algoritmos de BoF e VLAD, com valores de SPE de 70,7% e 64,5%, respectivamente, o que é uma melhoria considerável em relação ao método de redução de escala de imagens utilizado por diversos sistemas até então, como o BrainPort, com 56,2% de SPE.
Descrição
Palavras-chave
visão computacional , redes neurais , substituição sensorial , tecnologia assistiva , interface háptica
Assuntos Scopus
Citação
RIBANI, Ricardo. Codificação de imagens em sinais táteis através de redes neurais convolucionais. 2020. f. 77.
Tese (Engenharia Elétrica) - Universidade Presbiteriana Mackenzie, São Paulo, 2020.