Auxílio à pesquisa 12/50468-6 - Visão computacional, Acessibilidade - BV FAPESP
Processo: 12/50468-6
Bolsa(s) vinculada(s): 13/21349-1 - Visão para o cego: traduzindo conceitos visuais 3D em informações de 3D de áudio, BP.MS
13/17037-4 - Detecção de objetos em dispositivo assistivo para deficientes visuais, BP.IC
12/22653-3 - Visão para o cego: traduzindo conceitos visuais 3D em informações de 3D de áudio, BP.MS
Assunto(s): Visão computacional Acessibilidade Áudio digital Pessoas com deficiência visual
O objetivo deste projeto é a construção e avaliação de um sistema completo, prova de conceito, para auxílio do cego. O sistema é baseado na tradução de informações visuais em informações sonoras. A chave do problema da tradução da informação visual é a quantidade de informação - vídeo tem ordens de magnitude mais informação do que áudio. Neste projeto utilizaremos visão computacional para extrair Informações de alto nível, e utilizaremos áudio 3D para representar esta informação com noção espacial. O Hardware deste sistema utilizara o Microsoft Kinect para coletar dados com cor e profundidade, uma Euclidean board, que tem giroscópio, acelerômetro e bússola, um headfone de alta qualidade e um microcomputador portátil porém com alto poder de processamento (para processar os algoritmos em tempo real). O software será extensível e modular. Um sistema funcional apresenta uma série de desafios técnicos e científicos, que incluem desenvolvimento e integração de algoritmos de visão computacional, e o projeto e avaliação de interfaces auditivas. (AU)
GRIJALVA, FELIPE; MARTINI, LUIZ CESAR; MASIERO, BRUNO; GOLDENSTEIN, SIOME. A Recommender System for Improving Median Plane Sound Localization Performance Based on a Nonlinear Representation of HRTFs. IEEE ACCESS, v. 6, p. 24829-24836, 2018. Citações Web of Science: 0.
ANDALO, FERNANDA A.; TAUBIN, GABRIEL; GOLDENSTEIN, SIOME. PSQP: Puzzle Solving by Quadratic Programming. IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, v. 39, n. 2, p. 385-396, FEB 2017. Citações Web of Science: 9.
GRIJALVA, FELIPE; MARTINI, LUIZ CESAR; FLORENCIO, DINEI; GOLDENSTEIN, SIOME. Interpolation of Head-Related Transfer Functions Using Manifold Learning. IEEE SIGNAL PROCESSING LETTERS, v. 24, n. 2, p. 221-225, FEB 2017. Citações Web of Science: 7.
ANDALO, FERNANDA A.; TAUBIN, GABRIEL; GOLDENSTEIN, SIOME. Efficient height measurements in single images based on the detection of vanishing points. COMPUTER VISION AND IMAGE UNDERSTANDING, v. 138, p. 51-60, SEP 2015. Citações Web of Science: 6.