Estudo de caso: uso do ChatGPT para resolução de problemas de programação.

Detalhes bibliográficos
Autor(a) principal: SOUZA, Débora Lêda de Lucena.
Data de Publicação: 2023
Tipo de documento: Trabalho de conclusão de curso
Idioma: por
Título da fonte: Repositório Institucional da UCB
Texto Completo: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461
Resumo: A geração de programas a partir de linguagem natural visa transformar frases ou comandos em linguagem natural em código de programação. O ChatGPT é um chatbot de propósito geral baseado no modelo de linguagem GPT-3 desenvolvido para gerar texto como humano, e treinado em uma forma de conversação usando aprendizagem por reforço com feedback humano. Nesse cenário, questionamentos a respeito da confiabilidade das respostas geradas pelo ChatGPT 3.5 foram levantados. Assim, neste estudo, foi realizada uma avaliação do desempenho do modelo na resolução de 100 problemas de programação selecionados aleatoriamente de plataformas populares como LeetCode e BeeCrowd. Os problemas selecionados estão distribuídos entre os graus de complexidade Fácil, Intermediário e Difícil. Do total de 100 problemas submetidos, o modelo de linguagem conseguiu responder corretamente 71 problemas ao longo de 3 tentativas, sendo 50 deles da plataforma LeetCode e 21 da plataforma BeeCrowd. Sendo assim, é possível concluir que o ChatGPT pode ser usado para resolver uma gama de problemas, porém seu uso requer muita atenção, uma vez que nem sempre o resultado gerado estará correto.
id UCB-2_cc2cbbf5772a2d030f202384b585fbf6
oai_identifier_str oai:localhost:riufcg/30461
network_acronym_str UCB-2
network_name_str Repositório Institucional da UCB
repository_id_str
spelling Estudo de caso: uso do ChatGPT para resolução de problemas de programação.Case study: using ChatGPT for programming problem solving.Problemas de programação - resoluçãoChatGPTLeetCodeBeeCrowdResolução de problemas - programaçãoProgramaçãoChatbotLinguagem GPT-3Estudo de casoProcessamento de linguagem naturalProgramming problems - resolutionTroubleshooting - programmingScheduleGPT-3 languageCase studyNatural language processingCiência da Computação.A geração de programas a partir de linguagem natural visa transformar frases ou comandos em linguagem natural em código de programação. O ChatGPT é um chatbot de propósito geral baseado no modelo de linguagem GPT-3 desenvolvido para gerar texto como humano, e treinado em uma forma de conversação usando aprendizagem por reforço com feedback humano. Nesse cenário, questionamentos a respeito da confiabilidade das respostas geradas pelo ChatGPT 3.5 foram levantados. Assim, neste estudo, foi realizada uma avaliação do desempenho do modelo na resolução de 100 problemas de programação selecionados aleatoriamente de plataformas populares como LeetCode e BeeCrowd. Os problemas selecionados estão distribuídos entre os graus de complexidade Fácil, Intermediário e Difícil. Do total de 100 problemas submetidos, o modelo de linguagem conseguiu responder corretamente 71 problemas ao longo de 3 tentativas, sendo 50 deles da plataforma LeetCode e 21 da plataforma BeeCrowd. Sendo assim, é possível concluir que o ChatGPT pode ser usado para resolver uma gama de problemas, porém seu uso requer muita atenção, uma vez que nem sempre o resultado gerado estará correto.The generation of programs from natural language aims to transform sentences or commands in natural language into programming code. ChatGPT is a general-purpose chatbot based on the GPT-3 language model designed to generate text like a human. It has been trained using reinforcement learning with human feedback in a conversational format. In this scenario, concerns about the reliability of the responses generated by ChatGPT 3.5 have been raised. Therefore, this study evaluated the model's performance in solving 100 randomly selected programming problems from popular platforms such as LeetCode and BeeCrowd. The selected problems were distributed among the Easy, Intermediate, and Difficult complexity levels. Out of the total of 100 submitted problems, the language model was able to correctly answer 71 problems across 3 attempts, with 50 of them from the LeetCode platform and 21 from the BeeCrowd platform. Thus, it can be concluded that ChatGPT can be used to solve a range of problems, but its use requires careful attention as the generated result may not always be correct.Universidade Federal de Campina GrandeBrasilCentro de Engenharia Elétrica e Informática - CEEIUFCGGHEYI, Rohit.GHEYI, R.http://lattes.cnpq.br/2931270888717344FARIA, Roberto Medeiros de.BRASILEIRO, Francisco Vilar.SOUZA, Débora Lêda de Lucena.2023-06-292023-06-29T17:14:33Z2023-06-292023-06-29T17:14:33Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesishttp://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461SOUZA, Débora Lêda de Lucena. Estudo de caso: uso do ChatGPT para resolução de problemas de programação. 2023. 10f. (Trabalho de Conclusão de Curso - Artigo), Curso de Bacharelado em Ciência da Computação, Centro de Engenharia Elétrica e Informática , Universidade Federal de Campina Grande – Paraíba - Brasil, 2023. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UCBinstname:Universidade Católica de Brasília (UCB)instacron:UCB2023-06-29T17:15:20Zoai:localhost:riufcg/30461Repositório InstitucionalPRIhttps://repositorio.ucb.br/oai/requestsara.ribeiro@ucb.bropendoar:2023-06-29T17:15:20Repositório Institucional da UCB - Universidade Católica de Brasília (UCB)false
dc.title.none.fl_str_mv Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
Case study: using ChatGPT for programming problem solving.
title Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
spellingShingle Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
SOUZA, Débora Lêda de Lucena.
Problemas de programação - resolução
ChatGPT
LeetCode
BeeCrowd
Resolução de problemas - programação
Programação
Chatbot
Linguagem GPT-3
Estudo de caso
Processamento de linguagem natural
Programming problems - resolution
Troubleshooting - programming
Schedule
GPT-3 language
Case study
Natural language processing
Ciência da Computação.
title_short Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
title_full Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
title_fullStr Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
title_full_unstemmed Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
title_sort Estudo de caso: uso do ChatGPT para resolução de problemas de programação.
author SOUZA, Débora Lêda de Lucena.
author_facet SOUZA, Débora Lêda de Lucena.
author_role author
dc.contributor.none.fl_str_mv GHEYI, Rohit.
GHEYI, R.
http://lattes.cnpq.br/2931270888717344
FARIA, Roberto Medeiros de.
BRASILEIRO, Francisco Vilar.
dc.contributor.author.fl_str_mv SOUZA, Débora Lêda de Lucena.
dc.subject.por.fl_str_mv Problemas de programação - resolução
ChatGPT
LeetCode
BeeCrowd
Resolução de problemas - programação
Programação
Chatbot
Linguagem GPT-3
Estudo de caso
Processamento de linguagem natural
Programming problems - resolution
Troubleshooting - programming
Schedule
GPT-3 language
Case study
Natural language processing
Ciência da Computação.
topic Problemas de programação - resolução
ChatGPT
LeetCode
BeeCrowd
Resolução de problemas - programação
Programação
Chatbot
Linguagem GPT-3
Estudo de caso
Processamento de linguagem natural
Programming problems - resolution
Troubleshooting - programming
Schedule
GPT-3 language
Case study
Natural language processing
Ciência da Computação.
description A geração de programas a partir de linguagem natural visa transformar frases ou comandos em linguagem natural em código de programação. O ChatGPT é um chatbot de propósito geral baseado no modelo de linguagem GPT-3 desenvolvido para gerar texto como humano, e treinado em uma forma de conversação usando aprendizagem por reforço com feedback humano. Nesse cenário, questionamentos a respeito da confiabilidade das respostas geradas pelo ChatGPT 3.5 foram levantados. Assim, neste estudo, foi realizada uma avaliação do desempenho do modelo na resolução de 100 problemas de programação selecionados aleatoriamente de plataformas populares como LeetCode e BeeCrowd. Os problemas selecionados estão distribuídos entre os graus de complexidade Fácil, Intermediário e Difícil. Do total de 100 problemas submetidos, o modelo de linguagem conseguiu responder corretamente 71 problemas ao longo de 3 tentativas, sendo 50 deles da plataforma LeetCode e 21 da plataforma BeeCrowd. Sendo assim, é possível concluir que o ChatGPT pode ser usado para resolver uma gama de problemas, porém seu uso requer muita atenção, uma vez que nem sempre o resultado gerado estará correto.
publishDate 2023
dc.date.none.fl_str_mv 2023-06-29
2023-06-29T17:14:33Z
2023-06-29
2023-06-29T17:14:33Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/bachelorThesis
format bachelorThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461
SOUZA, Débora Lêda de Lucena. Estudo de caso: uso do ChatGPT para resolução de problemas de programação. 2023. 10f. (Trabalho de Conclusão de Curso - Artigo), Curso de Bacharelado em Ciência da Computação, Centro de Engenharia Elétrica e Informática , Universidade Federal de Campina Grande – Paraíba - Brasil, 2023. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461
url http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461
identifier_str_mv SOUZA, Débora Lêda de Lucena. Estudo de caso: uso do ChatGPT para resolução de problemas de programação. 2023. 10f. (Trabalho de Conclusão de Curso - Artigo), Curso de Bacharelado em Ciência da Computação, Centro de Engenharia Elétrica e Informática , Universidade Federal de Campina Grande – Paraíba - Brasil, 2023. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
UFCG
publisher.none.fl_str_mv Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
UFCG
dc.source.none.fl_str_mv reponame:Repositório Institucional da UCB
instname:Universidade Católica de Brasília (UCB)
instacron:UCB
instname_str Universidade Católica de Brasília (UCB)
instacron_str UCB
institution UCB
reponame_str Repositório Institucional da UCB
collection Repositório Institucional da UCB
repository.name.fl_str_mv Repositório Institucional da UCB - Universidade Católica de Brasília (UCB)
repository.mail.fl_str_mv sara.ribeiro@ucb.br
_version_ 1834013070207221760