A Springer Nature anunciou a retirada de uma meta-análise que uma vez defendeu o ChatGPT como uma ferramenta revolucionária para a educação. O artigo, publicado em 6 de maio de 2025 na revista Humanidades & Ciências Sociais Comunicações, alegou que o chatbot de IA entregou um "impacto positivo grande" no desempenho de aprendizado, um "impacto moderadamente positivo" na percepção de aprendizado e fomentou o pensamento de ordem superior. Para chegar a essas conclusões, os autores reuniram resultados de 51 estudos anteriores e calcularam um tamanho de efeito geral entre grupos experimentais que usaram o ChatGPT e grupos de controle que não o fizeram.

Nas semanas seguintes à publicação, o artigo atraiu uma atenção massiva. Ele recebeu 262 citações em outras revistas da Springer Nature, 504 citações em fontes revisadas por pares e não revisadas por pares, e quase meio milhão de leitores. Seu score Altmetric o colocou no percentil 99 para artigos acadêmicos, e os usuários das mídias sociais o saudaram como uma evidência sólida e precoce de que a IA gerativa beneficia os aprendizes.

A decisão da Springer Nature de retirar o artigo veio após uma revisão interna que descobriu "discrepâncias" na análise e uma falta de confiança nos resultados relatados. A editora não especificou a natureza exata dos erros, mas o aviso de retirada enfatizou preocupações metodológicas.

Ben Williamson, um professor sênior do Centro de Pesquisa em Educação Digital da Universidade de Edimburgo, questionou a credibilidade do estudo desde o início. Ele observou que a meta-análise pareceu combinar estudos de muito baixa qualidade e justapor resultados de pesquisas com métodos, populações e tamanhos de amostra muito diferentes. "Em alguns casos, parece que estava sintetizando estudos de muito baixa qualidade, ou misturando resultados de estudos que simplesmente não podem ser comparados com precisão", disse Williamson à Ars. Ele também destacou a cronologia improvável: o artigo apareceu apenas dois anos e meio após o lançamento público do ChatGPT em novembro de 2022. "Não é factível que dezenas de estudos de alta qualidade sobre o ChatGPT e o desempenho de aprendizado pudessem ter sido conduzidos, revisados e publicados nesse tempo", disse ele.

A retirada destaca a crescente escrutínio da pesquisa relacionada à IA. Embora a promessa da IA gerativa nas salas de aula permaneça um tópico quente, especialistas alertam que publicações apressadas podem distorcer a base de evidências. "Parecia realmente um artigo que não deveria ter sido publicado em primeiro lugar", acrescentou Williamson.

Para os acadêmicos que já citaram o estudo, a retirada cria um efeito em cadeia. Os pesquisadores precisarão reavaliar quaisquer conclusões tiradas dos tamanhos de efeito agora invalidados. Bibliotecas e bancos de dados estão atualizando registros para sinalizar o artigo como retirado, e gerenciadores de citações devem alertar os usuários que referenciaram o trabalho.

A OpenAI não comentou sobre a retirada. A empresa continua a promover o ChatGPT para uma variedade de aplicações, incluindo a educação, mas enfrentou críticas sobre a robustez das alegações sobre seus benefícios pedagógicos. O episódio serve como uma história de advertência para acadêmicos, editores e formuladores de políticas ansiosos para demonstrar o impacto da IA sem sacrificar a rigorosidade científica.

À medida que a conversa sobre a IA na educação evolui, a comunidade acadêmica parece pronta para exigir padrões mais altos de evidência. O estudo retirado provavelmente permanecerá como uma nota de rodapé no debate mais amplo, lembrando às partes interessadas que o entusiasmo deve ser temperado por pesquisas cuidadosas e reproduzíveis.

Usado: News Factory APP - descoberta e automação de notícias - ChatGPT para Empresas