A carregar...
Publicação
BioVisualSpeech: Deployment of an Interactive Platform for Speech Therapy Sessions With Children
| Nome: | Descrição: | Tamanho: | Formato: | |
|---|---|---|---|---|
| 20.71 MB | Adobe PDF |
Autores
Orientador(es)
Resumo(s)
Sigmatism is a speech sound disorder (SSD) that prevents people from correctly pro-
nouncing sibilant consonant sounds ([Z], [z], [S] and [s]). If left untreated, it can negatively
impact children’s ability to communicate and socialize. Parents are advised to seek speech
therapy for their kids whenever they are not reaching the milestones that are expected of
their age, and while the exercises employed in speech therapy sessions are vital for the
treatment of these disorders, they can also become repetitive.
BioVisualSpeech is a research project that explores ways to provide biofeedback in
speech therapy sessions through the usage of serious games. An example of this is the
BioVisualSpeech Therapy Support Platform, an interactive tool that contains many types
of games in one place, and which children can play in therapy sessions and at home by
using the computer’s microphone to capture their voices. However, because the platform
was developed in an academic context, it was important for us to adapt this system to the
context of real life in collaboration with speech-language pathologists (SLPs).
To achieve this, we set the goal of deploying the platform to SLPs’ computers. For
that we first reengineered the system to turn it into an in-session focused application,
instead of a system where children can practice with SLPs and at home. In addition,
we also integrated Windows Speech Recognition into the platform, made the system
easier to install and capable of collecting data from players, such as voice productions
that could be used in the future to train better classification models, and other objective
parameters concerning game performance. Our deployment with SLPs was accompanied
by the questionnaires, documentation and data collection protocol needed to proceed
with: firstly, the further validation of the platform along with two of its games and,
secondly, the design of a user study focused on gathering voice productions from children.
In the end, not only did we get promising results regarding the validation of the
platform, but SLPs also got the opportunity to own a system that can continue to be used,
and distributed by future researchers, even after the termination of this project.
O sigmatismo é uma perturbação da fala que impede quem sofre deste de pronunciar corretamente as consoantes sibilantes ([Z], [z], [S] and [s]). Se deixado por tratar, este pode ter um impacto negativo na habilidade das crianças de comunicar e socializar. Pais destas crianças são aconselhados a procurar consultas de terapia da fala para os seus filhos, e enquanto que os exercícios utilizados durante as sessões de terapia da fala são vitais para o tratamento de perturbações, estes também correm o risco de se tornarem repetitivos. BioVisualSpeech é um projeto de investigação que explora formas de fornecer bio- feedback em sessões de terapia da fala através de jogos sérios. Um exemplo destes é a Plataforma de Apoio à Terapia da Fala da BioVisualSpeech, um sistema que contém vários tipos de jogos que as crianças podem jogar em sessões de terapia e em casa, utilizando para isso o microfone do computador para capturarem as suas vozes. Contudo, visto que a plataforma foi desenvolvida num contexto académico, era importante adaptá-la ao contexto do mundo real em colaboração com terapeutas da fala e da linguagem (TFLs). Assim, o objetivo desta dissertação foi implantar a plataforma para os computadores de TFLs. Para isso foi primeiro preciso mudar o foco da plataforma de modo a se tornar numa aplicação de apoio às sessões de terapia, exclusivamente. Para além disto, também se integrou o Sistema de Reconhecimento de Voz do Windows na plataforma, tornou-se o sistema mais fácil de instalar e capaz de recolher dados dos jogadores, como produções de voz que podem no futuro ser utilizadas para treinar melhores classificadores de fala, e outros parâmetros objetivos sobre os jogos. A implantação com TFLs foi acompanhada pelos questionários, documentação e protocolo necessários para proceder com: primeiro, a validação da plataforma e dois dos seus jogos e, segundo, o desenho de um estudo focado na recolha de produções de voz de crianças. No final, não só foram obtidos resultados promissores no que toca à validação da plataforma, mas os TFLs também tiveram a oportunidade de ficar com um sistema que pode continuar a ser utilizado mesmo depois deste projeto acabar.
O sigmatismo é uma perturbação da fala que impede quem sofre deste de pronunciar corretamente as consoantes sibilantes ([Z], [z], [S] and [s]). Se deixado por tratar, este pode ter um impacto negativo na habilidade das crianças de comunicar e socializar. Pais destas crianças são aconselhados a procurar consultas de terapia da fala para os seus filhos, e enquanto que os exercícios utilizados durante as sessões de terapia da fala são vitais para o tratamento de perturbações, estes também correm o risco de se tornarem repetitivos. BioVisualSpeech é um projeto de investigação que explora formas de fornecer bio- feedback em sessões de terapia da fala através de jogos sérios. Um exemplo destes é a Plataforma de Apoio à Terapia da Fala da BioVisualSpeech, um sistema que contém vários tipos de jogos que as crianças podem jogar em sessões de terapia e em casa, utilizando para isso o microfone do computador para capturarem as suas vozes. Contudo, visto que a plataforma foi desenvolvida num contexto académico, era importante adaptá-la ao contexto do mundo real em colaboração com terapeutas da fala e da linguagem (TFLs). Assim, o objetivo desta dissertação foi implantar a plataforma para os computadores de TFLs. Para isso foi primeiro preciso mudar o foco da plataforma de modo a se tornar numa aplicação de apoio às sessões de terapia, exclusivamente. Para além disto, também se integrou o Sistema de Reconhecimento de Voz do Windows na plataforma, tornou-se o sistema mais fácil de instalar e capaz de recolher dados dos jogadores, como produções de voz que podem no futuro ser utilizadas para treinar melhores classificadores de fala, e outros parâmetros objetivos sobre os jogos. A implantação com TFLs foi acompanhada pelos questionários, documentação e protocolo necessários para proceder com: primeiro, a validação da plataforma e dois dos seus jogos e, segundo, o desenho de um estudo focado na recolha de produções de voz de crianças. No final, não só foram obtidos resultados promissores no que toca à validação da plataforma, mas os TFLs também tiveram a oportunidade de ficar com um sistema que pode continuar a ser utilizado mesmo depois deste projeto acabar.
Descrição
Palavras-chave
Speech and Language Therapy Sibilant Consonants Sigmatism Model Deployment User Study Windows Speech Recognition