Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira

Detalhes bibliográficos
Autor(a) principal: Coelho, Márcio Selemen
Data de Publicação: 2024
Tipo de documento: Trabalho de conclusão de curso
Idioma: por
Título da fonte: Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
Texto Completo: https://www.repositorio.mar.mil.br/handle/ripcmb/847656
Resumo: RESUMO INTELIGÊNCIA ARTIFICIAL GENERATIVA: construção e avaliação de um modelo em apoio à Autoridade Marítima Brasileira Este trabalho apresenta o desenvolvimento de um modelo de inteligência artificial generativa com arquitetura de recuperação, ampliação e geração para a aplicação de normas da Autoridade Marítima Brasileira e legislações correlatas, a fim de determinar o seu desempenho. O estudo aborda a construção de uma base vetorial de dados a partir de normativos selecionados, a implementação de uma ferramenta utilizando um grande modelo de linguagem e a avaliação de sua performance. A metodologia técnica empregada envolveu a utilização de modelos do Google e da OpenAI, além de algoritmos e frameworks na linguagem de programação Python. O modelo desenvolvido foi avaliado utilizando questões de um concurso público da Marinha do Brasil para ingresso no quadro técnico na área de segurança do tráfego aquaviário, alcançando um grau de acurácia de 75%. Métricas adicionais como fidelidade da resposta, relevância da resposta e relevância do contexto foram também mensuradas. Os resultados alcançados indicam um desempenho robusto da ferramenta, comparável a benchmarks de modelos avançados no mercado. Não obstante os números promissores, o estudo discute ainda as limitações e desafios na implementação de uma inteligência artificial generativa, incluindo alucinações, vieses, questões de interpretabilidade, segurança e privacidade. Por fim, o trabalho conclui que o modelo desenvolvido representa um passo significativo para a consideração da aplicação dessa tecnologia emergente como ferramenta de apoio à autoridade marítima do Brasil, com potencial para automatizar consultas, agilizar interpretações normativas e aprimorar o treinamento de pessoal, contribuindo para garantir a conformidade regulatória e o fortalecimento do poder marítimo do Brasil.
id MB_f81e2e7b1d21436abb93fda3967e9c7f
oai_identifier_str oai:www.repositorio.mar.mil.br:ripcmb/847656
network_acronym_str MB
network_name_str Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
repository_id_str
spelling Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileiraAvaliação de desempenhoInteligência artificial generativaGrandes modelos de linguagemNormas da Autoridade Marítima BrasileiraRecuperação, ampliação e geraçãoCiência, Tecnologia e InovaçãoRESUMO INTELIGÊNCIA ARTIFICIAL GENERATIVA: construção e avaliação de um modelo em apoio à Autoridade Marítima Brasileira Este trabalho apresenta o desenvolvimento de um modelo de inteligência artificial generativa com arquitetura de recuperação, ampliação e geração para a aplicação de normas da Autoridade Marítima Brasileira e legislações correlatas, a fim de determinar o seu desempenho. O estudo aborda a construção de uma base vetorial de dados a partir de normativos selecionados, a implementação de uma ferramenta utilizando um grande modelo de linguagem e a avaliação de sua performance. A metodologia técnica empregada envolveu a utilização de modelos do Google e da OpenAI, além de algoritmos e frameworks na linguagem de programação Python. O modelo desenvolvido foi avaliado utilizando questões de um concurso público da Marinha do Brasil para ingresso no quadro técnico na área de segurança do tráfego aquaviário, alcançando um grau de acurácia de 75%. Métricas adicionais como fidelidade da resposta, relevância da resposta e relevância do contexto foram também mensuradas. Os resultados alcançados indicam um desempenho robusto da ferramenta, comparável a benchmarks de modelos avançados no mercado. Não obstante os números promissores, o estudo discute ainda as limitações e desafios na implementação de uma inteligência artificial generativa, incluindo alucinações, vieses, questões de interpretabilidade, segurança e privacidade. Por fim, o trabalho conclui que o modelo desenvolvido representa um passo significativo para a consideração da aplicação dessa tecnologia emergente como ferramenta de apoio à autoridade marítima do Brasil, com potencial para automatizar consultas, agilizar interpretações normativas e aprimorar o treinamento de pessoal, contribuindo para garantir a conformidade regulatória e o fortalecimento do poder marítimo do Brasil.Trabalho apresentado à Escola de Guerra Naval, como requisito parcial para conclusão do Curso Superior (C-SUP 2024)ABSTRACT GENERATIVE ARTIFICIAL INTELLIGENCE: construction and evaluation of a model in support of the Brazilian Maritime Authority This work presents the development of a generative artificial intelligence model with a retrieval, augmentation, and generation architecture for the application of Brazilian Maritime Authority regulations and related legislation, to determine its performance. The study addresses the construction of a vector database from selected normative documents, the implementation of the tool using a large language model and the evaluation of its performance. The technical methodology employed involved the use of models from Google and OpenAI, as well as algorithms and frameworks in the Python programming language. The developed model was evaluated using questions from a public contest of the Brazilian Navy for entry into the technical staff in the area of water traffic safety, achieving an accuracy rate of 75%. Additional metrics such as response fidelity, response relevance and context relevance were also measured. The results achieved indicate a robust performance of the tool, comparable to benchmarks of advanced models on the market. Despite the promising numbers, the study also discusses limitations and challenges in the implementation of generative artificial intelligence, including hallucinations, biases, issues of interpretability, security and privacy. Finally, the work concludes that the developed model represents a significant step towards considering the application of this emerging technology as a support tool for the Brazilian Maritime Authority, with the potential to automate queries, speed up normative interpretations and improve personnel training, contributing to ensuring regulatory compliance and strengthening Brazil's maritime power.Escola de Guerra Naval (EGN)Silva, Ketia Kellen Araújo daCoelho, Márcio Selemen2025-03-18T14:38:43Z2025-03-18T14:38:43Z2024info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesisapplication/pdfhttps://www.repositorio.mar.mil.br/handle/ripcmb/847656info:eu-repo/semantics/openAccessporreponame:Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)instname:Marinha do Brasil (MB)instacron:MB2025-03-18T14:39:50Zoai:www.repositorio.mar.mil.br:ripcmb/847656Repositório InstitucionalPUBhttps://www.repositorio.mar.mil.br/oai/requestdphdm.repositorio@marinha.mil.bropendoar:2025-03-18T14:39:50Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB) - Marinha do Brasil (MB)false
dc.title.none.fl_str_mv Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
title Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
spellingShingle Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
Coelho, Márcio Selemen
Avaliação de desempenho
Inteligência artificial generativa
Grandes modelos de linguagem
Normas da Autoridade Marítima Brasileira
Recuperação, ampliação e geração
Ciência, Tecnologia e Inovação
title_short Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
title_full Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
title_fullStr Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
title_full_unstemmed Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
title_sort Inteligência Artificial generativa: Construção e avaliação de um modelo em apoio à autoridade marítima brasileira
author Coelho, Márcio Selemen
author_facet Coelho, Márcio Selemen
author_role author
dc.contributor.none.fl_str_mv Silva, Ketia Kellen Araújo da
dc.contributor.author.fl_str_mv Coelho, Márcio Selemen
dc.subject.por.fl_str_mv Avaliação de desempenho
Inteligência artificial generativa
Grandes modelos de linguagem
Normas da Autoridade Marítima Brasileira
Recuperação, ampliação e geração
Ciência, Tecnologia e Inovação
topic Avaliação de desempenho
Inteligência artificial generativa
Grandes modelos de linguagem
Normas da Autoridade Marítima Brasileira
Recuperação, ampliação e geração
Ciência, Tecnologia e Inovação
description RESUMO INTELIGÊNCIA ARTIFICIAL GENERATIVA: construção e avaliação de um modelo em apoio à Autoridade Marítima Brasileira Este trabalho apresenta o desenvolvimento de um modelo de inteligência artificial generativa com arquitetura de recuperação, ampliação e geração para a aplicação de normas da Autoridade Marítima Brasileira e legislações correlatas, a fim de determinar o seu desempenho. O estudo aborda a construção de uma base vetorial de dados a partir de normativos selecionados, a implementação de uma ferramenta utilizando um grande modelo de linguagem e a avaliação de sua performance. A metodologia técnica empregada envolveu a utilização de modelos do Google e da OpenAI, além de algoritmos e frameworks na linguagem de programação Python. O modelo desenvolvido foi avaliado utilizando questões de um concurso público da Marinha do Brasil para ingresso no quadro técnico na área de segurança do tráfego aquaviário, alcançando um grau de acurácia de 75%. Métricas adicionais como fidelidade da resposta, relevância da resposta e relevância do contexto foram também mensuradas. Os resultados alcançados indicam um desempenho robusto da ferramenta, comparável a benchmarks de modelos avançados no mercado. Não obstante os números promissores, o estudo discute ainda as limitações e desafios na implementação de uma inteligência artificial generativa, incluindo alucinações, vieses, questões de interpretabilidade, segurança e privacidade. Por fim, o trabalho conclui que o modelo desenvolvido representa um passo significativo para a consideração da aplicação dessa tecnologia emergente como ferramenta de apoio à autoridade marítima do Brasil, com potencial para automatizar consultas, agilizar interpretações normativas e aprimorar o treinamento de pessoal, contribuindo para garantir a conformidade regulatória e o fortalecimento do poder marítimo do Brasil.
publishDate 2024
dc.date.none.fl_str_mv 2024
2025-03-18T14:38:43Z
2025-03-18T14:38:43Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/bachelorThesis
format bachelorThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://www.repositorio.mar.mil.br/handle/ripcmb/847656
url https://www.repositorio.mar.mil.br/handle/ripcmb/847656
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Escola de Guerra Naval (EGN)
publisher.none.fl_str_mv Escola de Guerra Naval (EGN)
dc.source.none.fl_str_mv reponame:Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
instname:Marinha do Brasil (MB)
instacron:MB
instname_str Marinha do Brasil (MB)
instacron_str MB
institution MB
reponame_str Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
collection Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
repository.name.fl_str_mv Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB) - Marinha do Brasil (MB)
repository.mail.fl_str_mv dphdm.repositorio@marinha.mil.br
_version_ 1844954152406351872