Meta learning approaches for few-shot semantic segmentation with sparse labels
Main Author: | |
---|---|
Publication Date: | 2021 |
Format: | Master thesis |
Language: | eng |
Source: | Repositório Institucional da UFMG |
Download full: | http://hdl.handle.net/1843/58285 https://orcid.org/0000-0002-9802-593X |
Summary: | Segmentação Semântica é uma tarefa clássica de visão computacional que tem múltiplas aplicações em diversas áreas, desde de segmentação de órgãos para estudos clínicos por imagem, contagem de objetos em linha de produção, até a estimativa de tamanho de áreas de desmatamento. Entretanto, o tipo de rotulação de dados necessária para os métodos atuais resolverem o problema é laboriosa de se produzir, uma vez que é necessário determinar os rótulos de todos os pixels da imagem. Isso costuma aumentar o custo (humano e/ou monetário) de construção de novos conjuntos de dados. Duas formas possíveis de se reduzir esse custo são: 1) diminuindo o número de imagens anotadas; 2) usando um formato de anotação mais simples/esparsa. Porém, os métodos comuns e mais atuais, de deep learning, para segmentação semântica não funcionam bem usando uma, ou duas, dessas soluções. Neste trabalho propomos dois métodos de meta learning para segmentação semântica em cenários few-shot com rotulação esparsa. Essas abordagens foram baseadas em dois métodos existentes para classificação: Model-Agnostic Meta-Learning (MAML) e Prototypical Networks. As nossas abordagens foram testadas em diversos cenários da área médica e sensoriamento remoto, que normalmente tem uma limitação de aquisição de dados, e obtiveram resultados competitivos em diferentes tarefas. |
id |
UFMG_2bd46bf3c1c86d14950c63cbb35d70a4 |
---|---|
oai_identifier_str |
oai:repositorio.ufmg.br:1843/58285 |
network_acronym_str |
UFMG |
network_name_str |
Repositório Institucional da UFMG |
repository_id_str |
|
spelling |
Meta learning approaches for few-shot semantic segmentation with sparse labelsComputingComputer VisionMachine LearningDeep LearningMeta LearningComputação – TesesVisão por computador – TesesAprendizagem de máquina – TesesAprendizado profundo – TesesMeta-aprendizado – TesesSegmentação Semântica é uma tarefa clássica de visão computacional que tem múltiplas aplicações em diversas áreas, desde de segmentação de órgãos para estudos clínicos por imagem, contagem de objetos em linha de produção, até a estimativa de tamanho de áreas de desmatamento. Entretanto, o tipo de rotulação de dados necessária para os métodos atuais resolverem o problema é laboriosa de se produzir, uma vez que é necessário determinar os rótulos de todos os pixels da imagem. Isso costuma aumentar o custo (humano e/ou monetário) de construção de novos conjuntos de dados. Duas formas possíveis de se reduzir esse custo são: 1) diminuindo o número de imagens anotadas; 2) usando um formato de anotação mais simples/esparsa. Porém, os métodos comuns e mais atuais, de deep learning, para segmentação semântica não funcionam bem usando uma, ou duas, dessas soluções. Neste trabalho propomos dois métodos de meta learning para segmentação semântica em cenários few-shot com rotulação esparsa. Essas abordagens foram baseadas em dois métodos existentes para classificação: Model-Agnostic Meta-Learning (MAML) e Prototypical Networks. As nossas abordagens foram testadas em diversos cenários da área médica e sensoriamento remoto, que normalmente tem uma limitação de aquisição de dados, e obtiveram resultados competitivos em diferentes tarefas.Semantic Segmentation is a classic task in Computer Vision that has multiple applications in many areas, from organ segmentation for clinical image studies, or counting objects in production lines, to estimating deforestation areas sizes. However, the type of data labeling required for actual methods to solve this problem is laborious to produce, since one has to determine the label for all pixels of an image. This usually increases the cost (human and/or monetary) to produce new datasets. Two possible ways to reduce this cost are: 1) reducing the number of labeled samples; 2) using simpler/sparse types of annotation. Despite that, current and usual deep learning based methods for segmentation tend to perform poorly when using one, or two, of these solutions. In this work, we propose two meta learning methods to the few-shot semantic segmentation task with sparse annotations. These two approaches are based on two existing methods for classification: Model-Agnostic Meta-Learning (MAML) and Prototypical Networks. Our methods were tested in different scenarios in the medical and remote sensing areas, which usually have limited data access, and obtained competitive results in different tasks.CNPq - Conselho Nacional de Desenvolvimento Científico e TecnológicoCAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível SuperiorUniversidade Federal de Minas GeraisBrasilICX - DEPARTAMENTO DE CIÊNCIA DA COMPUTAÇÃOPrograma de Pós-Graduação em Ciência da ComputaçãoUFMGJefersson Alex dos Santoshttp://lattes.cnpq.br/2171782600728348Hugo Neves de OliveiraAdriano Alonso VelosoGilson Alexandre Ostwald Pedro CostaPedro Henrique Targino Gama2023-08-28T14:28:24Z2023-08-28T14:28:24Z2021-04-15info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/1843/58285https://orcid.org/0000-0002-9802-593Xenginfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFMGinstname:Universidade Federal de Minas Gerais (UFMG)instacron:UFMG2023-08-28T14:28:25Zoai:repositorio.ufmg.br:1843/58285Repositório InstitucionalPUBhttps://repositorio.ufmg.br/oairepositorio@ufmg.bropendoar:2023-08-28T14:28:25Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)false |
dc.title.none.fl_str_mv |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
title |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
spellingShingle |
Meta learning approaches for few-shot semantic segmentation with sparse labels Pedro Henrique Targino Gama Computing Computer Vision Machine Learning Deep Learning Meta Learning Computação – Teses Visão por computador – Teses Aprendizagem de máquina – Teses Aprendizado profundo – Teses Meta-aprendizado – Teses |
title_short |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
title_full |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
title_fullStr |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
title_full_unstemmed |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
title_sort |
Meta learning approaches for few-shot semantic segmentation with sparse labels |
author |
Pedro Henrique Targino Gama |
author_facet |
Pedro Henrique Targino Gama |
author_role |
author |
dc.contributor.none.fl_str_mv |
Jefersson Alex dos Santos http://lattes.cnpq.br/2171782600728348 Hugo Neves de Oliveira Adriano Alonso Veloso Gilson Alexandre Ostwald Pedro Costa |
dc.contributor.author.fl_str_mv |
Pedro Henrique Targino Gama |
dc.subject.por.fl_str_mv |
Computing Computer Vision Machine Learning Deep Learning Meta Learning Computação – Teses Visão por computador – Teses Aprendizagem de máquina – Teses Aprendizado profundo – Teses Meta-aprendizado – Teses |
topic |
Computing Computer Vision Machine Learning Deep Learning Meta Learning Computação – Teses Visão por computador – Teses Aprendizagem de máquina – Teses Aprendizado profundo – Teses Meta-aprendizado – Teses |
description |
Segmentação Semântica é uma tarefa clássica de visão computacional que tem múltiplas aplicações em diversas áreas, desde de segmentação de órgãos para estudos clínicos por imagem, contagem de objetos em linha de produção, até a estimativa de tamanho de áreas de desmatamento. Entretanto, o tipo de rotulação de dados necessária para os métodos atuais resolverem o problema é laboriosa de se produzir, uma vez que é necessário determinar os rótulos de todos os pixels da imagem. Isso costuma aumentar o custo (humano e/ou monetário) de construção de novos conjuntos de dados. Duas formas possíveis de se reduzir esse custo são: 1) diminuindo o número de imagens anotadas; 2) usando um formato de anotação mais simples/esparsa. Porém, os métodos comuns e mais atuais, de deep learning, para segmentação semântica não funcionam bem usando uma, ou duas, dessas soluções. Neste trabalho propomos dois métodos de meta learning para segmentação semântica em cenários few-shot com rotulação esparsa. Essas abordagens foram baseadas em dois métodos existentes para classificação: Model-Agnostic Meta-Learning (MAML) e Prototypical Networks. As nossas abordagens foram testadas em diversos cenários da área médica e sensoriamento remoto, que normalmente tem uma limitação de aquisição de dados, e obtiveram resultados competitivos em diferentes tarefas. |
publishDate |
2021 |
dc.date.none.fl_str_mv |
2021-04-15 2023-08-28T14:28:24Z 2023-08-28T14:28:24Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://hdl.handle.net/1843/58285 https://orcid.org/0000-0002-9802-593X |
url |
http://hdl.handle.net/1843/58285 https://orcid.org/0000-0002-9802-593X |
dc.language.iso.fl_str_mv |
eng |
language |
eng |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Universidade Federal de Minas Gerais Brasil ICX - DEPARTAMENTO DE CIÊNCIA DA COMPUTAÇÃO Programa de Pós-Graduação em Ciência da Computação UFMG |
publisher.none.fl_str_mv |
Universidade Federal de Minas Gerais Brasil ICX - DEPARTAMENTO DE CIÊNCIA DA COMPUTAÇÃO Programa de Pós-Graduação em Ciência da Computação UFMG |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UFMG instname:Universidade Federal de Minas Gerais (UFMG) instacron:UFMG |
instname_str |
Universidade Federal de Minas Gerais (UFMG) |
instacron_str |
UFMG |
institution |
UFMG |
reponame_str |
Repositório Institucional da UFMG |
collection |
Repositório Institucional da UFMG |
repository.name.fl_str_mv |
Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG) |
repository.mail.fl_str_mv |
repositorio@ufmg.br |
_version_ |
1835272352538034176 |