Aplicando o ChatGPT na condução de revisões sistemáticas da literatura:

protocolo de pesquisa

Authors

  • Ananda Fernanda de Jesus Universidade Estadual Paulista
  • José Eduardo Santarem Segundo Universidade Estadual Paulista

DOI:

https://doi.org/10.18225/ci.inf.v53i.6666

Keywords:

revisão sistemática da literatura, chatgpt, inteligência artificial

Abstract

O ChatGPT (Generative Pretrained Transformer), em sua terceira versão, é uma Inteligência artificial generativa, do tipo texto para texto, que tem sido testado e aplicado em diversos contextos, inclusive no contexto científico.   A presente pesquisa visa como objetivo verificar as potenciais contribuições do ChatGPT para o preenchimento do protocolo de pesquisa de Revisões Sistemáticas da Literatura (RSL). Como método, foi realizada uma pesquisa empírica e comparativa, partindo da elaboração de três diferentes tipos de prompt: simples, detalhado e detalhado com exemplo. Como resultados, observou-se que foram gerados modelos diferentes de protocolos, inclusive quando uma segunda solicitação foi feita utilizando um mesmo prompt. Observou-se ainda oscilação entre os campos apresentados, principalmente os campos: objetivos, processo de seleção, estratégia de busca e formulário de extração. A presença ou ausência desses campos ocorre em diferentes respostas. Conclui-se que existem limitações ao uso do ChatGPT para o preenchimento de protocolos de pesquisa, entretanto, essas limitações podem ser minimizadas com a apresentação de um modelo de protocolo predefinido. Conclui-se ainda que a familiaridade do pesquisador tanto com o preenchimento de protocolos de pesquisa como com a temática que circunda a RSL também pode contribuir para minimizar essas limitações.

Downloads

Download data is not yet available.

References

BRINER, R.; DENYER, D. Systematic Review and Evidence Synthesis as a Practice and Scholarship Tool. In: ROUSSEAU, D. M. (ed.). The Oxford Handbook Of Evidence-Based Management: companies, classroom and research. [S. l.]: Oxford University Press, 2012. cap. 7, p. 112-129. DOI 10.1093/oxfordhb/9780199763986.013.0007.

CONEGLIAN, C. S. Recuperação da Informação com abordagem semântica utilizando Linguagem Natural: a Inteligência Artificial na Ciência da Informação. Orientador: Dr. José Eduardo Santarem Segundo. 2020. 194 f. Tese (Doutorado) - Curso de Programa de Pós-Graduação em Ciência da Informação, Universidade Estadual Paulista, Marília, 2020. Disponível em: https://repositorio.unesp.br/bitstream/handle/11449/193051/coneglian_cs_dr_mar.pdf?sequence=3&isAllowed=y. Acesso em: 8 set. 2022.

GOZALO-BRIZUELA, R.; GARRIDO-MERCHAN, E. C. ChatGPT is not all you need. A State of the Art Review of large Generative AI models. Arxiv, [s. l.], v. 1, n. 1, p. 1-22, 2023. Disponível em: http://dx.doi.org/10.48550/ARXIV.2301.04655. Acesso em: 18 maio 2023.

IFTIKHAR, L.; IFTIKHAR, M. F.; HANIF, M. I. DocGPT: impact of ChatGPT-3 on health services as a virtual doctor. Ec Paediatrics, [s. l.], v. 12, n. 3, p. 45-55, Mar. 2023. Disponível em: https://www.researchgate.net/publication/369013064_DocGPT_Impact_of_ChatGPT-3_on_Health_Services_as_a_Virtual_Doctor. Acesso em: 18 maio 2023.

KOOLI, C. Chatbots in Education and Research: a critical examination of ethical implications and solutions. Sustainability, [s. l.], v. 15, n. 7, p. 5614, mar. 2023. Disponível em: http://dx.doi.org/10.3390/su15075614. Acesso em: 29 jun. 2023.

JESUS, A. F.; TRIQUES M. L.; SEGUNDO, J. E. S.; ALBUQUERQUE, A. C. Processamento de linguagem natural e machine learning na categorização de artigos científicos: um estudo em torno do “patrimônio cultural”. Revista Ibero-Americana de Ciência da Informação, [s. l.], v. 16, n. 1, p. 167–184, jan./abril. 2023. DOI: 10.26512/rici.v16.n1.2023.47537. Disponível em: https://periodicos.unb.br/index.php/RICI/article/view/47537. Acesso em: 29 jun. 2023

WANG, S.; SCELLS, H.; ZUCCON, G.; KOOPMAN, B. Can ChatGPT Write a Good Boolean Query for Systematic Review Literature Search? Arxiv, [s. l.], v. 1, n. 1, p. 1-19, Feb. 2023. Disponível em: http://dx.doi.org/10.48550/ARXIV.2302.03495. Acesso em: 18 maio 2023.

Published

18/07/2024