Multi-people tracking using a distributed camera network: application to a university campus

Detalhes bibliográficos
Autor(a) principal: Matos, Henrique Miguel Cardoso
Data de Publicação: 2023
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
Texto Completo: https://hdl.handle.net/1822/91570
Resumo: Dissertação de mestrado em Engenharia de Telecomunicações e Informática
id RCAP_1e5a446bbc92fed8d5e0e0b445a435c4
oai_identifier_str oai:repositorium.sdum.uminho.pt:1822/91570
network_acronym_str RCAP
network_name_str Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
repository_id_str https://opendoar.ac.uk/repository/7160
spelling Multi-people tracking using a distributed camera network: application to a university campusCampus inteligenteDetecção de objetosMonitorização de múltiplos objetosReidentificaçãoMonitorização de pessoasSmart campusObject detectionMultiple object trackingRe-identificationPeople trackingEngenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e InformáticaDissertação de mestrado em Engenharia de Telecomunicações e InformáticaNesta dissertação é explorado o tema da monitorização de múltiplos objetos no contexto de um ”smart campus”, com foco no contexto específico num campus universitário, sendo este o tema principal do projeto de investigação Lab4USpace. A monitorização de múltiplos objetos, especialmente de pessoas, é relevante para diversas aplicações, incluindo aplicações de vigilância, mobilidade e inteligência ambiental. No entanto, torna-se particularmente desafiante no contexto de espaços abertos, às quais exigem soluções com múltiplas câmaras com problemas inerentes, tais como a reidentificação. O objetivo desta dissertação é desenvolver um framework capaz de fornecer informações sobre o percurso de várias pessoas ao longo do campus universitário usando um cenário com múltiplas câmaras. A solução visa não só a monitorização de uma pessoa num único cenário, mas também em todo o campus, coberto por diversas câmaras com ou sem sobreposição. Esta dissertação discute os diversos desafios enfrentados durante o desenvolvimento deste projeto, incluindo preocupações com a privacidade e segurança dos utilizadores do campus. Com isso, optou-se por não enviar imagens para nenhuma aplicação, tratando apenas das informações estritamente retiradas da monitorização das pessoas. Um dos principais desafios foi desenvolver um framework que rastreie vários objetos num ambiente de um ”smart campus”, abordando desafios de espaços abertos e problemas de reidentificação. Além disso, devido aos recursos computacionais limitados, foi usado um computador de bordo para lidar com processamento de imagens e operações relacionadas às técnicas de visão computacional de maneira mais eficaz. O framework proposto utiliza modelos de deteção de objetos e algoritmos de monitorização em tempo real que foram comparados neste contexto específico. Depois de pesquisar outras alternativas, a estrutura usa o modelo YOLOv7-tiny para deteção de objetos, BoT-Sort para a monitorização dos vários objetos e Deep Person Reid para a reidentificação. O programa foi desenvolvido em Python e juntamente a ele foi também criado um website para alterar as configurações do sistema de monitorização utilizando o framework Flask. Um message broker também foi utilizado para a comunicação entre os diversos componentes do sistema. Os testes de validação demonstram a eficácia da framework proposta na monitorização das várias pessoas em todo o campus. O sistema proposto contribui significativamente para o desenvolvimento de soluções de múltiplas câmaras mais eficientes e eficazes para aplicações de ”smart campus”, com benefícios potenciais para a segurança, proteção e gestão do campus. No geral, esta dissertação apresenta uma estrutura que rastreia de maneira eficaz várias pessoas num ambiente de ”smart campus”. A framework é uma contribuição importante para o desenvolvimento na área do ”smart campus” e tem potencial para desenvolvimento futuro e aplicações para além do campus universitário.This dissertation explores the topic of object multi-tracking in the context of a smart campus, focusing on the specific context of a university campus, being the main topic of the Lab4USpace research project. Multi-tracking of objects, especially people, is relevant for different applications, including surveillance, mobility, and ambient intelligence. However, it becomes particularly challenging in open spaces, which require multi-camera solutions with inherent issues like re-identification. The objective of this dissertation is to develop a framework capable of providing information about the path of multiple people throughout the university campus using a multi-camera scenario. The solution aims not only to track a person in a single scenario but also over the entire campus, covered by various cameras with or without overlapping. This dissertation discusses the challenges faced during the development of this project, including concerns about the privacy and security of campus users. As a result, the decision was made not to send images for any application, dealing only with the information strictly retrieved from the tracking. One main challenge was developing a framework that tracks multiple objects in a smart campus environment, addressing the challenges of open spaces and re-identification issues. Additionally, due to limited computational resources, an edge computer was used to handle image processing and computer vision-related operations more effectively. The proposed framework uses different object detection models and real-time tracking algorithms that were compared in this specific context. After researching other alternatives, the framework uses the YOLOv7 tiny model for object detection, BoT-Sort for multiple object tracking, and Deep Person Reid for re-identification. The program was developed in Python and alongside it was also created a website to change the configurations of the tracking system using the Flask framework. A message broker was also used for communication between the various components of the system. Validation tests demonstrate the effectiveness of the proposed framework in tracking multiple people across the campus. The proposed framework significantly contributes to developing efficient and effective multi-camera solutions for smart campus applications, with potential benefits for campus safety, security, and management. Overall, this dissertation presents a framework that effectively tracks multiple people in a smart campus environment. The framework is an important contribution to the smart campus context and has the potential for future development and applications beyond the university campus.Santos, HenriqueUniversidade do MinhoMatos, Henrique Miguel Cardoso2023-10-022023-10-02T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttps://hdl.handle.net/1822/91570eng203561872info:eu-repo/semantics/openAccessreponame:Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)instname:FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologiainstacron:RCAAP2024-06-08T01:19:36Zoai:repositorium.sdum.uminho.pt:1822/91570Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireinfo@rcaap.ptopendoar:https://opendoar.ac.uk/repository/71602025-05-28T17:54:41.742491Repositórios Científicos de Acesso Aberto de Portugal (RCAAP) - FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologiafalse
dc.title.none.fl_str_mv Multi-people tracking using a distributed camera network: application to a university campus
title Multi-people tracking using a distributed camera network: application to a university campus
spellingShingle Multi-people tracking using a distributed camera network: application to a university campus
Matos, Henrique Miguel Cardoso
Campus inteligente
Detecção de objetos
Monitorização de múltiplos objetos
Reidentificação
Monitorização de pessoas
Smart campus
Object detection
Multiple object tracking
Re-identification
People tracking
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
title_short Multi-people tracking using a distributed camera network: application to a university campus
title_full Multi-people tracking using a distributed camera network: application to a university campus
title_fullStr Multi-people tracking using a distributed camera network: application to a university campus
title_full_unstemmed Multi-people tracking using a distributed camera network: application to a university campus
title_sort Multi-people tracking using a distributed camera network: application to a university campus
author Matos, Henrique Miguel Cardoso
author_facet Matos, Henrique Miguel Cardoso
author_role author
dc.contributor.none.fl_str_mv Santos, Henrique
Universidade do Minho
dc.contributor.author.fl_str_mv Matos, Henrique Miguel Cardoso
dc.subject.por.fl_str_mv Campus inteligente
Detecção de objetos
Monitorização de múltiplos objetos
Reidentificação
Monitorização de pessoas
Smart campus
Object detection
Multiple object tracking
Re-identification
People tracking
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
topic Campus inteligente
Detecção de objetos
Monitorização de múltiplos objetos
Reidentificação
Monitorização de pessoas
Smart campus
Object detection
Multiple object tracking
Re-identification
People tracking
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
description Dissertação de mestrado em Engenharia de Telecomunicações e Informática
publishDate 2023
dc.date.none.fl_str_mv 2023-10-02
2023-10-02T00:00:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1822/91570
url https://hdl.handle.net/1822/91570
dc.language.iso.fl_str_mv eng
language eng
dc.relation.none.fl_str_mv 203561872
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
instname:FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologia
instacron:RCAAP
instname_str FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologia
instacron_str RCAAP
institution RCAAP
reponame_str Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
collection Repositórios Científicos de Acesso Aberto de Portugal (RCAAP)
repository.name.fl_str_mv Repositórios Científicos de Acesso Aberto de Portugal (RCAAP) - FCCN, serviços digitais da FCT – Fundação para a Ciência e a Tecnologia
repository.mail.fl_str_mv info@rcaap.pt
_version_ 1833597050501988352

Registros relacionados