Soporte de interacciones multimodales para aplicaciones web

• Autores: Páez, Diego I.
• Año de publicación: 2015
• Idioma: español castellano
• Tipo de recurso: tesis de grado
• Colaborador/a o director/a de tesis: Rossi, Gustavo Héctor; Rodríguez, Andrés
• Materia: Ciencias Informáticas; interacciones multimodales; aplicaciones informáticas; aplicación web
• Institución: Universidad Nacional de La Plata

En este trabajo de tesis se propone una herramienta que hace posible aprovechar mas de una modalidad dentro del contexto de una aplicación web, de forma que se aumente el conjunto de interacciones, soportando así nuevas interacciones multimodales. Por interacciones multimodales, se hace referencia a todas aquellas interacciones, tanto para con el mundo físico real, como para el virtual a través de los diferentes modos; cada uno de estos modos esta “asociado” a los sentidos del ser humano, de acuerdo a Bourguet. Se busca, de esta forma, eliminar o disminuir barreras en la comunicación hombre-máquina/aplicación, e. g. eliminando o dando una alternativa al uso del teclado, eligiendo favorecer a nuevas capacidades de interacción naturales, i. e. asociados a los sentidos. Cuando se permite operar con mas de uno de estos modos en simultáneo, estamos frente a interacciones multimodales, una de las aplicaciones clásicas que abrió el camino multimodal, es el trabajo de Bolt con put-that-there, donde se estudiaba la interacción en una aplicación, de la voz y gestos para indicar comandos. Las aplicaciones web son crecientemente populares, extendiéndose continuamente a nuevos dominios y plataformas. Un número increíblemente grande de usuarios entran en contacto directos con aplicaciones web diariamente utilizando dispositivos que ofrecen mecanismos de interacción diferentes, los cuales en muchos casos, pueden ser utilizados de manera simultánea. Teniendo en cuenta este contexto, se ha desarrollado una plataforma, denominada Plusultra, junto a un protocolo de comunicación y un cliente modular, Gyes, que no solo permite consumir eventos generados por las modalidades si no también definir nuevos drivers para ampliar el catálogo de modalidades soportadas. Todas estas herramientas son open source lo que significa que no solo pueden ser mejoradas por la comunidad si no también extendidas en alcance, por ejemplo, como se mencionó a través del desarrollo de nuevos drivers. Así es como se aumentan las capacidades interactivas de las aplicaciones web. El contenido de este documento está organizado de la siguiente manera; el primer capítulo introduce al lector en el estado del arte actual del soporte a interacciones multimodales. En el segundo y tercer capítulo se analiza en dos partes las estrategias elegidas para desarrollar la plataforma Plusultra y el módulo cliente Gyes. Luego, en el capítulo cuatro, se define que se entiende por aplicación web y como se extienden sus capacidades de interacción usando la plataforma. En el capítulo cinco, se muestra a todo el conjunto de tecnologías desarrolladas en acción, usando como ejemplo a la aplicación Shapes, desarrollada específicamente para este trabajo. Finalmente, el lector encontrará en el capítulo seis, las conclusiones y las posibilidades de extensión, detalladas como trabajo a futuro. A su vez se agregan dos apéndices con información en detalle sobre las modalidades elegidas en el trabajo, estas son háptica y gestual.
Licenciado en Informática
Universidad Nacional de La Plata
Facultad de Informática