Immersive virtual reality facial expression training

Bibliographic Details
Main Author: Martins, Jorge Junior Rodrigues
Publication Date: 2024
Format: Master thesis
Language: eng
Source: Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
Download full: https://hdl.handle.net/10316/116228
Summary: Dissertação de Mestrado em Engenharia Informática apresentada à Faculdade de Ciências e Tecnologia
id RCAP_a38c1effdf12d32de7278e8023321a2f
oai_identifier_str oai:estudogeral.uc.pt:10316/116228
network_acronym_str RCAP
network_name_str Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
repository_id_str https://opendoar.ac.uk/repository/7160
spelling Immersive virtual reality facial expression trainingTreino de expressão facial em realidade virtual imersivaAutism Spectrum DisorderFacial ExpressionsVirtual RealityVirtual Reality TherapyFacial emotion recognitionPerturbação do Espetro do AutismoExpressões FaciaisRealidade VirtualTerapia com Realidade VirtualReconhecimento de Expressões FaciaisDissertação de Mestrado em Engenharia Informática apresentada à Faculdade de Ciências e TecnologiaAutism Spectrum Disorder (ASD) is a neurodevelopmental disorder characterized by difficulties in social communication and interaction, as well as restricted and repetitive behaviors. Individuals with ASD often struggle with recognizing and expressing emotions, which can impact their social interactions and overall well-being. In this project, we aim to develop a gamified intervention to improve facial emotion recognition skills in individuals with ASD. The intervention consists of a Virtual Reality (VR) serious game focused on facial emotion recognition that was designed to provide a safe and engaging environment for individuals with ASD to practice and improve their emotional understanding and expression abilities. To develop this game, we draw inspiration from existing serious games for ASD, such as the “TravelTrain” game, which focuses on social skills training in a simulated bus travel scenario. By leveraging the foundation provided by the TravelTrain game, we adapted and expanded upon its mechanics and assets to create a game specifically targeting facial emotion recognition skills. The project involves designing and implementing the game mechanics, user interfaces, and game assets. We also conducted user testing with individuals diagnosed with ASD to gather feedback and evaluate the effectiveness of the game in using it for treatment. This project aims to contribute to the field of serious games for ASD and provide a valuable resource for individuals with ASD to improve their emotional skills in a fun and interactive way. The outcomes of this project can inform future interventions and contribute to the overall well-being and social integration of individuals with ASD.A Perturbação do Espectro do Autismo (PEA) é um distúrbio neurodesenvolvimental caracterizado por dificuldades na comunicação social e na interação, bem como por comportamentos restritos e repetitivos. Indivíduos com PEA frequentemente apresentam dificuldades em reconhecer e expressar emoções, o que pode afetar as suas interações sociais e o seu bem-estar geral. Neste projeto, desenvolvemos uma intervenção para melhorar as habilidades de reconhecimento de emoções faciais em indivíduos com PEA. A intervenção consistiu num jogo sério de Realidade Virtual (RV) com foco no reconhecimento de emoções faciais que será projetado para fornecer um ambiente seguro e envolvente para indivíduos com PEA praticarem e melhorarem as suas habilidades de compreensão e expressão emocional. Para desenvolver este jogo, inspiramo-nos em jogos sérios existentes para PEA, como o jogo "TravelTrain", que se concentra no treino de habilidades sociais num cenário de viagem de autocarro simulado. Aproveitando a base fornecida pelo jogo Trav- ElTrain, adaptamos e expandimos as suas mecânicas e conteúdo para criar um jogo específico para o reconhecimento de expressões faciais. O projeto incluiu o ‘design’ e implementação das mecânicas do jogo, interfaces do utilizador e recursos do jogo. Também realizaremos testes de utilizadores com indivíduos diagnosticados com PEA para recolher ‘feedback’ e avaliar a eficácia do jogo no tratamento. Este projeto visa contribuir para a área de jogos sérios para PEA e fornecer um recurso valioso para indivíduos com PEA para melhorar a suas habilidades emocionais de uma maneira divertida e interativa. Os resultados deste projeto podem informar futuras intervenções e contribuir para o bem-estar geral e a integração social de indivíduos com PEA.2024-02-01info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesishttps://hdl.handle.net/10316/116228https://hdl.handle.net/10316/116228TID:203693680engMartins, Jorge Junior Rodriguesinfo:eu-repo/semantics/openAccessreponame:Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)instname:FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologiainstacron:RCAAP2024-09-11T22:00:28Zoai:estudogeral.uc.pt:10316/116228Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireinfo@rcaap.ptopendoar:https://opendoar.ac.uk/repository/71602025-05-29T06:09:38.535253Repositórios Científicos de Acesso Aberto de Portugal (RCAAP) - FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologiafalse
dc.title.none.fl_str_mv Immersive virtual reality facial expression training
Treino de expressão facial em realidade virtual imersiva
title Immersive virtual reality facial expression training
spellingShingle Immersive virtual reality facial expression training
Martins, Jorge Junior Rodrigues
Autism Spectrum Disorder
Facial Expressions
Virtual Reality
Virtual Reality Therapy
Facial emotion recognition
Perturbação do Espetro do Autismo
Expressões Faciais
Realidade Virtual
Terapia com Realidade Virtual
Reconhecimento de Expressões Faciais
title_short Immersive virtual reality facial expression training
title_full Immersive virtual reality facial expression training
title_fullStr Immersive virtual reality facial expression training
title_full_unstemmed Immersive virtual reality facial expression training
title_sort Immersive virtual reality facial expression training
author Martins, Jorge Junior Rodrigues
author_facet Martins, Jorge Junior Rodrigues
author_role author
dc.contributor.author.fl_str_mv Martins, Jorge Junior Rodrigues
dc.subject.por.fl_str_mv Autism Spectrum Disorder
Facial Expressions
Virtual Reality
Virtual Reality Therapy
Facial emotion recognition
Perturbação do Espetro do Autismo
Expressões Faciais
Realidade Virtual
Terapia com Realidade Virtual
Reconhecimento de Expressões Faciais
topic Autism Spectrum Disorder
Facial Expressions
Virtual Reality
Virtual Reality Therapy
Facial emotion recognition
Perturbação do Espetro do Autismo
Expressões Faciais
Realidade Virtual
Terapia com Realidade Virtual
Reconhecimento de Expressões Faciais
description Dissertação de Mestrado em Engenharia Informática apresentada à Faculdade de Ciências e Tecnologia
publishDate 2024
dc.date.none.fl_str_mv 2024-02-01
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/10316/116228
https://hdl.handle.net/10316/116228
TID:203693680
url https://hdl.handle.net/10316/116228
identifier_str_mv TID:203693680
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.source.none.fl_str_mv reponame:Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
instname:FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologia
instacron:RCAAP
instname_str FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologia
instacron_str RCAAP
institution RCAAP
reponame_str Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
collection Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
repository.name.fl_str_mv Repositórios Científicos de Acesso Aberto de Portugal (RCAAP) - FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologia
repository.mail.fl_str_mv info@rcaap.pt
_version_ 1833602597534040064

Similar Items