Modelo replicável de engenharia de prompts para recuperação de literatura científica com ChatGPT

Autores

DOI:

https://doi.org/10.5007/1518-2924.2026.e109140

Palavras-chave:

Inteligência artificial generativa, engenharia de prompts, recuperação da informação, bibliotecas universitárias, ciência aberta

Resumo

A expansão da inteligência artificial generativa tem transformado os processos de recuperação de literatura científica, criando oportunidades de maior eficiência e acessibilidade, mas também levantando questionamentos sobre verificabilidade, rigor e geração de referências fictícias em contextos acadêmicos. Na biblioteconomia e na ciência da informação, persiste uma lacuna metodológica quanto à existência de protocolos replicáveis capazes de avaliar o desempenho operacional dessas ferramentas em buscas bibliográficas.

Objetivo: Avaliar a eficácia do ChatGPT, modelo GPT-5.2, no ambiente ChatGPT Plus, por meio de um protocolo estruturado de engenharia de prompts aplicado em nove buscas controladas realizadas em fevereiro de 2026, distribuídas em três níveis geográficos: global, latino-americano e chileno.

Método: Adotou-se um delineamento exploratório-descritivo documental, com predominância quantitativa e componente interpretativo complementar, operacionalizando indicadores dicotômicos de precisão, rastreabilidade, coerência conceitual e eficiência temporal, além da validação manual de DOI ou URL.

Resultados: O corpus final consolidou 130 referências únicas verificadas, sem registros de alucinações após a aplicação do protocolo e com 100 por cento de coerência conceitual e rastreabilidade nas três zonas analisadas. Os tempos médios variaram entre 14 e 22 minutos por busca.

Conclusões: Os resultados demonstram que a engenharia de prompts, sob controle metodológico explícito, pode mitigar riscos documentados na literatura, oferecer um modelo replicável para bibliotecas universitárias e constituir uma contribuição substancial para o mapeamento sistemático da literatura e para a identificação fundamentada de lacunas e vazios de conhecimento em diferentes níveis geográficos.

Downloads

Não há dados estatísticos.

Biografia do Autor

Carlos Andrés Castillo Badilla, Universidad de las Américas

Sou especialista em Biblioteconomia e Ciência da Informação, formada em Informação e Documentação pela Universidade Católica da Sagrada Conceição (Chile), e tenho mais de oito anos de experiência em gestão de bibliotecas acadêmicas e prestação de serviços de apoio ao ensino. Atualmente, curso mestrado em Pesquisa e Desenvolvimento Social na Universidade de Concepción, aprimorando meu perfil de pesquisa com o objetivo de publicar em periódicos indexados. Possuo também um Diploma em Pesquisa-Ação Aplicada ao Ensino Universitário (Pró-Reitoria Acadêmica - Faculdade de Educação), que enriquece minhas habilidades em pesquisa aplicada e letramento informacional.

Minha expertise abrange a gestão de bases de dados acadêmicas, a padronização de referências bibliográficas (APA, Vancouver, ISO 690), o desenvolvimento de habilidades em letramento informacional, a capacitação de usuários, a análise de acervos e a avaliação de recursos eletrônicos. Tenho experiência avançada no uso de softwares de gestão bibliográfica (EndNote, Zotero, Mendeley), no fomento de comunidades acadêmicas, na promoção do letramento informacional e na consultoria em processos de publicação científica. Além disso, trabalho com a digitalização de acervos, a implementação de softwares para bibliotecas, indicadores de desempenho em bibliotecas universitárias e métricas de pesquisa. Minha gestão também abrange a liderança de equipes, a coordenação de processos de acreditação, a otimização da infraestrutura e projetos voltados para a melhoria contínua dos serviços de informação.

Lidero projetos de digitalização de bibliotecas e participo ativamente de processos de acreditação institucional, incluindo a coordenação de visitas de avaliadores da Comissão Nacional de Acreditação (CNA). Sou reconhecida por minhas habilidades de liderança, gestão de equipes e otimização de processos, tendo ocupado cargos estratégicos na Universidade das Américas, onde supervisiono a atualização das bibliografias curriculares e a manutenção dos registros do corpo docente. Minha experiência em tecnologias da informação aplicadas a bibliotecas, juntamente com a gestão avançada de sistemas e softwares especializados, me permitiu impulsionar melhorias inovadoras em infraestrutura e gestão.

Faço parte de redes profissionais relacionadas à biblioteconomia e à pesquisa em ciências sociais, promovendo a troca de conhecimento e boas práticas. Meus interesses de pesquisa atuais se concentram em bibliometria, gestão do conhecimento, inovação em bibliotecas universitárias e sustentabilidade da informação.

Meu objetivo é contribuir com soluções e gerar pesquisa aplicada que fortaleça a qualidade, a relevância e a inovação dos serviços de bibliotecas universitárias.

Referências

ALANIZ, L.; VU, C.; PFAFF, M. J. The utility of artificial intelligence for systematic reviews and Boolean query formulation and translation. Plastic and Reconstructive Surgery Global Open, v. 11, n. 10, e5339, 2023. DOI: 10.1097/GOX.0000000000005339. Disponible en: https://doi.org/10.1097/GOX.0000000000005339. Consultado el: 4 abr. 2026.

ALSHAMI, A.; ELSAYED, M.; ALI, E.; ELTOUKHY, A. E.; ZAYED, T. Harnessing the power of ChatGPT for automating systematic review process: methodology, case study, limitations, and future directions. Systems, Basel, v. 11, n. 7, p. 351, 2023. DOI: 10.3390/systems11070351. Disponible en: https://doi.org/10.3390/systems11070351. Consultado el: 4 abr. 2026.

ARIZA RUIZ, E. D. ChatGPT: una mirada desde la investigación. Revista Investigaciones Andina, Bogotá, v. 25, n. 46, p. 24–39, 2023. DOI: 10.33132/01248146.2256. Disponible en: https://doi.org/10.33132/01248146.2256. Consultado el: 4 abr. 2026.

BALDRICH DOMÍNGUEZ-OLLER, S. La inteligencia artificial y su impacto en la alfabetización académica: una revisión sistemática. Educatio Siglo XXI, Murcia, v. 42, n. 1, p. 55–74, 2024. DOI: 10.6018/educatio.609591. Disponible en: https://doi.org/10.6018/educatio.609591. Consultado el: 4 abr. 2026.

BLUM, M. ChatGPT produces fabricated references and falsehoods when used for scientific literature search. Journal of Cardiac Failure, v. 29, n. 9, p. 1332–1334, 2023. DOI: 10.1016/j.cardfail.2023.06.015. Disponible en: https://doi.org/10.1016/j.cardfail.2023.06.015. Consultado el: 4 abr. 2026.

BRASIL. Ministério da Saúde. Conselho Nacional de Saúde. Resolução n.º 510, de 7 de abril de 2016. Establece las normas aplicables a investigaciones en Ciencias Humanas y Sociales. Diário Oficial da União: sección 1, Brasilia, DF, 24 de mayo de 2016. Disponible en: https://www.gov.br/conselho-nacional-de-saude/pt-br/atos-normativos/resolucoes/2016/resolucao-no-510.pdf/view. Consultado el: 19 sep. 2025.

CAMACHO TAMBASCO, J. El impacto de la inteligencia artificial en la educación: riesgos y potencialidades de la IA en el aula. Revista Interuniversitaria de Investigación en Tecnología Educativa, Murcia, v. 16, n. 1, p. 1–15, 2023. DOI: 10.6018/riite.584501. Disponible en: https://doi.org/10.6018/riite.584501. Consultado el: 4 abr. 2026.

CHELLI, M.; KHALFI, L.; RODRÍGUEZ, L.; TEJADA-LLACSA, P. J.; AUGEREAU, O. Hallucination rates and reference accuracy of ChatGPT and Bard for systematic reviews: comparative analysis. Journal of Medical Internet Research, Toronto, v. 26, e53164, 2024. DOI: 10.2196/53164. Disponible en: https://doi.org/10.2196/53164. Consultado el: 4 abr. 2026.

CHILE. Ministerio de Ciencia, Tecnología, Conocimiento e Innovación. Política Nacional de Inteligencia Artificial. Santiago de Chile: MINCIENCIA, 2024. Disponible en: https://minciencia.gob.cl/areas/inteligencia-artificial/politica-nacional-de-inteligencia-artificial/. Consultado el: 19 sep. 2025.

JI, Ziwei; LEE, Nayeon; FRIESKE, Rita; YU, Tiezheng; SU, Dan; XU, Yan; ISHII, Etsuko; BANG, Yejin; CHEN, Delong; DAI, Wenliang; CHAN, Ho Shu; MADOTTO, Andrea; FUNG, Pascale. Survey of hallucination in natural language generation. ACM Computing Surveys, New York, v. 55, n. 12, p. 1–38, 2023. DOI: 10.1145/3571730. Disponible en: https://doi.org/10.1145/3571730. Consultado el: 1 abr. 2026.

LEE, Y.; OH, J. H.; LEE, D.; KANG, M.; LEE, S. Prompt engineering in ChatGPT for literature review: practical guide exemplified with studies on white phosphors. Scientific Reports, v. 15, n. 1, p. 15310, 2025. DOI: 10.1038/s41598-025-99423-9. Disponible en: https://doi.org/10.1038/s41598-025-99423-9. Consultado el: 4 abr. 2026.

MAHRISHI, M.; ABBAS, A.; RADOVANOVIĆ, D. Emerging dynamics of ChatGPT in academia: a scoping review. Journal of University Teaching and Learning Practice, Wollongong, v. 21, n. 3, p. 1–19, 2024. DOI: 10.53761/b182ws13. Disponible en: https://doi.org/10.53761/b182ws13. Consultado el: 4 abr. 2026.

MOSTAFAHPOUR, M.; FORTIER, J. H.; PACHECO, K.; MURRAY, H.; GARBER, G. Evaluating literature reviews conducted by humans versus ChatGPT: comparative study. JMIR AI, v. 3, e56537, 2024. DOI: 10.2196/56537. Disponible en: https://doi.org/10.2196/56537. Consultado el: 4 abr. 2026.

NAVAS-MARTÍN, M. A.; CUERDO-VILCHES, T. Discurso grupal basado en narrativas generadas por inteligencia artificial como metodología activa en la enseñanza en arquitectura. Advances in Building Education, Madrid, v. 8, n. 1, p. 59–74, 2024. DOI: 10.20868/abe.2024.1.5234. Disponible en: https://doi.org/10.20868/abe.2024.1.5234. Consultado el: 4 abr. 2026.

OPENAI. Introducing deep research. 2025. Disponible en: https://openai.com/index/introducing-deep-research/. Consultado el: 13 feb. 2026.

PARISI, V.; SUTTON, A. The role of ChatGPT in developing systematic literature searches: an evidence summary. Journal of EAHIL, Roma, v. 20, n. 2, p. 30–34, 2024. DOI: 10.32384/jeahil20623. Disponible en: https://doi.org/10.32384/jeahil20623. Consultado el: 4 abr. 2026.

RUIZ MENDOZA, K. K.; PEDROZA ZÚÑIGA, L. H. Uso de ChatGPT como ayudante en una RSL con el método PRISMA. Sciencevolution, México, v. 2, n. 10, p. 9–17, 2024. DOI: 10.61325/ser.v2i10.81. Disponible en: https://doi.org/10.61325/ser.v2i10.81. Consultado el: 4 abr. 2026.

SAHOO, P.; SINGH, A. K.; SAHA, S.; JAIN, V.; MONDAL, S.; CHADHA, A. A systematic survey of prompt engineering in large language models: techniques and applications. arXiv, 2024. DOI: 10.48550/arXiv.2402.07927. Disponible en: https://doi.org/10.48550/arXiv.2402.07927. Consultado el: 4 abr. 2026.

SERCOMBE, J.; BRYANT, Z.; WILSON, J. Evaluating a customized version of ChatGPT for systematic review data extraction in health research: development and usability study. JMIR Formative Research, v. 9, e68666, 2025. DOI: 10.2196/68666. Disponible en: https://doi.org/10.2196/68666. Consultado el: 02 abr. 2026.

UNIVERSIDAD DE LAS AMÉRICAS (Chile). Marco para el uso de la inteligencia artificial en UDLA: docencia, investigación y vinculación con el medio. Santiago de Chile: Universidad de Las Américas, 2025. Serie: Documentos para la formación del cuerpo académico en IA. Disponible en: https://www.udla.cl/descargas/normativas/marco-para-uso-ia-en-udla.pdf. Consultado el: 1 oct. 2025.

WALTERS, William H.; WILDER, Esther Isabelle. Fabrication and errors in the bibliographic citations generated by ChatGPT. Scientific Reports, [S. l.], v. 13, n. 1, art. 14045, 2023. DOI: 10.1038/s41598-023-41032-5. Disponible en: https://doi.org/10.1038/s41598-023-41032-5. Consultado el: 5 abr. 2026.

WANG, S.; SCELLS, H.; KOOPMAN, B.; ZUCCON, G. Can ChatGPT write a good Boolean query for systematic review literature search? En: INTERNATIONAL ACM SIGIR CONFERENCE ON RESEARCH AND DEVELOPMENT IN INFORMATION RETRIEVAL, 46., 2023, Taipei. Proceedings [...]. New York: ACM, 2023. p. 1426–1436. DOI: 10.1145/3539618.3591703. Disponible en: https://doi.org/10.1145/3539618.3591703. Consultado el: 4 abr. 2026.

WILKINSON, C.; OPPERT, M.; OWEN, M. Investigating academics’ attitudes towards ChatGPT: a qualitative study. Australasian Journal of Educational Technology, Sydney, v. 40, n. 1, p. 142–156, 2024. DOI: 10.14742/ajet.9456. Disponible en: https://doi.org/10.14742/ajet.9456. Consultado el: 4 abr. 2026.

ZHOU, D.; ZHANG, Y. Political biases and inconsistencies in bilingual GPT models: the cases of the U.S. and China. Scientific Reports, London, v. 14, n. 13489, 2024. DOI: 10.1038/s41598-024-76395-w. Disponible en: https://doi.org/10.1038/s41598-024-76395-w. Consultado el: 4 abr. 2026.

Capa do periódico Académico Encontros Bibli, da Universidade Federal de Santa Catarina (UFSC). Volume 31, ano 2026 Nela se mostram as mãos de uma pessoa com a pele morena segurando um punhado de terra escura, na qual um pequeno broto verde com duas folhas está plantado. As mãos estão centralizadas na imagem e são enquadradas por um fundo que mostra um solo seco e rachado, sugerindo um ambiente de seca ou desértico. No topo da imagem, o título da publicação, ENCONTROS BIBLI, está em letras maiúsculas brancas. Abaixo, há uma citação entre aspas: "Ética e integridade informacional: a responsabilidade científica e socioambiental da Ciência da Informação diante da urgência climática". Na parte inferior da capa, há informações institucionais: No canto esquerdo, o logo da UFSC. Ao lado, o texto "Departamento de Ciência da Informação", "Programa de Pós-graduação em Ciência da Informação" e "Portal de Periódicos UFSC". Abaixo, a data "2026", o volume "V. 31" e o ISSN 1518-2924. No canto inferior direito, o logo da publicação, que consiste em um escudo roxo com as letras "EB" estilizadas em laranja. A capa utiliza as cores roxo, branco e laranja, com a maior parte da imagem ocupada pelo cenário do solo e as mãos. A arte visual e o tema do título da publicação sugerem um foco na interseção entre a ciência, a informação e as questões ambientais, como a crise climática.

Downloads

Arquivos adicionais

Publicado

06-08-2026

Como Citar

CASTILLO BADILLA, Carlos Andrés. Modelo replicável de engenharia de prompts para recuperação de literatura científica com ChatGPT. Encontros Bibli: revista eletrônica de biblioteconomia e ciência da informação, Florianópolis/SC, Brasil, v. 31, p. 1–30, 2026. DOI: 10.5007/1518-2924.2026.e109140. Disponível em: https://periodicos.ufsc.br/index.php/eb/article/view/109140. Acesso em: 26 ago. 2026.

Edição

v. 31 (2026): Ética e integridade informacional na urgência climática: a responsabilidade Socioambiental da Ciência da Informação.

Seção

Artigos

Licença

Copyright (c) 2026 Carlos Andrés Castillo Badilla

Creative Commons License
Este trabalho está licenciado sob uma licença Creative Commons Attribution 4.0 International License.

O autor deve garantir:

  • que haja um consenso completo de todos os coautores em aprovar a versão final do documento e sua submissão para publicação.
  • que seu trabalho é original, e se o trabalho e/ou palavras de outras pessoas foram utilizados, estas foram devidamente reconhecidas.

Plágio em todas as suas formas constituem um comportamento antiético de publicação e é inaceitável. Encontros Bibli reserva-se o direito de usar software ou quaisquer outros métodos de detecção de plágio.

Todas as submissões recebidas para avaliação na revista Encontros Bibli: revista eletrônica de biblioteconomia e ciência da informação passam por identificação de plágio e autoplágio. Plágios identificados em manuscritos durante o processo de avaliação acarretarão no arquivamento da submissão. No caso de identificação de plágio em um manuscrito publicado na revista, o Editor Chefe conduzirá uma investigação preliminar e, caso necessário, fará a retratação.

Esta revista, seguindo as recomendações do movimento de Acesso Aberto, proporciona seu conteúdo em Full Open Access. Assim os autores conservam todos seus direitos permitindo que a Encontros Bibli possa publicar seus artigos e disponibilizar pra toda a comunidade.

Os conteúdos de Encontros Bibli estão licenciados sob uma Licença Creative Commons 4.0 by.  

Qualquer usuário tem direito de:

  • Compartilhar — copiar, baixar, imprimir ou redistribuir o material em qualquer suporte ou formato
  • Adaptar — remixar, transformar, e criar a partir do material para qualquer fim, mesmo que comercial.

De acordo com os seguintes termos:

  • Atribuição — Você deve dar o crédito apropriado, prover um link para a licença e indicar se mudanças foram feitas. Você deve fazê-lo em qualquer circunstância razoável, mas de maneira alguma que sugira ao licenciante a apoiar você ou o seu uso.
  • Sem restrições adicionais — Você não pode aplicar termos jurídicos ou medidas de caráter tecnológico que restrinjam legalmente outros de fazerem algo que a licença permita.
Crossref
Scopus
Google Scholar
Europe PMC