Sistema multimodal para captura e anotação de vídeo

Abstract

Actualmente, existe um grande crescimento de popularidade de dispositivos tácteis e multi-toque e, por isso, é necessário cada vez mais o desenvolvimento de aplicações e interfaces que sejam elaboradas especificamente para esse tipo de interacção. Através da caneta digital e do toque humano, esta interacção torna-se natural para o utilizador, pois assemelha-se à interacção humano-papel-caneta. Este tipo de interacção pode ser aplicado a documentos multimédia, em particular ao controlo e à anotação de vídeo digital. Assim como as anotações em publicações impressas promovem a leitura activa, as anotações de vídeo promovem a visualização activa, facilitando a reflexão e a aprendizagem com o enriquecimento do conteúdo do vídeo. As formas de arte performativas, como a dança, são domínios que envolvem várias iterações de ensaio, onde a anotação de vídeo pode melhorar significativamente o processo criativo dos autores. Assim, a solução proposta tem como objectivo o desenvolvimento de uma ferramenta que suporte a captura e anotação multimodal de vídeo em tempo real, a ser executada num Tablet PC, explorando a interacção bimanual de toque humano com a caneta digital. A ferramenta permite ao utilizador capturar um vídeo através de uma fonte e, simultaneamente, anotá-lo, de forma a documentar segmentos desse vídeo para futura recuperação e pesquisa e aumentar o seu conteúdo, associando-lhe um significado próprio. No âmbito da dança contemporânea, um coreógrafo pode utilizar o sistema a fim de registar e anotar um ensaio ou uma performance ao vivo, actuando como um bloco de notas digital que pode ser revisto e partilhado com os artistas. Esta proposta está enquadrada no projecto TKB, desenvolvido em colaboração com a Faculdade de Ciências Sociais Humanas da Universidade Nova de Lisboa – FCSH/UNL, que inclui nos objectivos o desenvolvimento de um anotador de vídeo aplicado à dança contemporânea.