ChatGPT Gerou Referências? Veja Como Verificar Se São Reais

Você pediu ao ChatGPT para sugerir referências para seu trabalho de pesquisa. Ele te deu dez. Elas parecem perfeitas — nomes de autores corretos, títulos de periódicos plausíveis, anos realistas, DOIs formatados corretamente. Você as cola em sua bibliografia e segue em frente.

Três dessas referências não existem.

Isso não é hipotético. Acontece constantemente. Grandes modelos de linguagem não consultam artigos em um banco de dados — eles preveem como uma citação deve ser com base em padrões em seus dados de treinamento. O resultado é um texto que segue todas as convenções de formatação, mas aponta para artigos que nunca foram publicados.

Se seu professor, revisor ou editor de periódico verificar essas referências, o melhor cenário é o constrangimento. O pior cenário é uma rejeição imediata, uma investigação de integridade acadêmica ou um artigo retratado.

Veja como identificar as falsificações antes que qualquer outra pessoa o faça.

Por Que o ChatGPT Gera Referências Falsas

O ChatGPT não tem acesso a um banco de dados acadêmico. Quando você pede uma citação, ele gera o próximo token plausível em uma sequência — o nome de um primeiro autor, um ano, o título de um periódico, um prefixo DOI — sem verificar se alguma dessas partes corresponde realmente a uma publicação real.

Isso cria três tipos de referências falsas:

Totalmente inventadas. O artigo não existe de forma alguma. O título, os autores e o periódico são todos gerados do zero. Uma busca no Google Scholar ou CrossRef não retorna nada.

Referências quimera. O modelo combina elementos reais de diferentes artigos. O autor é real e publica no periódico citado. O periódico é real. Mas aquele artigo específico — aquele autor, aquele título, aquele ano — não existe. Este tipo é perigoso porque a verificação parcial é bem-sucedida.

Referências distorcidas. Um artigo real existe, mas o ChatGPT erra um ou mais detalhes — o ano está errado por um, o nome de um coautor está grafado incorretamente ou o DOI tem um dígito transposto. A referência quase corresponde a uma publicação real.

Passo 1: Não Confie, Verifique

A primeira regra é simples: trate cada referência gerada por IA como não verificada até que você a confirme pessoalmente.

Isso se aplica independentemente do modelo de IA que você usou. GPT-4, Claude, Gemini, Perplexity — todos eles podem e geram citações fabricadas. Modelos com capacidade de busca na web reduzem, mas não eliminam o problema.

Passo 2: Verificação Rápida — Pesquise o Título

Copie o título exato de cada referência e pesquise-o no Google Scholar. Use aspas para uma correspondência exata:

"Adaptive neural frameworks for multilingual sentiment analysis"

Se o Google Scholar retornar zero resultados para o título exato, o artigo quase certamente não existe. Mova-o para sua lista de "suspeitos".

Se o Google Scholar retornar um resultado, abra-o e verifique se os autores, o ano e o periódico correspondem ao que o ChatGPT te deu. Um título correspondente com autores diferentes é uma referência quimera.

Tempo por referência: 30-60 segundos.

Passo 3: Verificação de DOI

Se a referência incluir um DOI, verifique-o em doi.org. Cole o DOI no resolvedor.

Três resultados possíveis:

• Resolve para o artigo correto → a referência é provavelmente real. Verifique os metadados.
• Resolve para um artigo diferente → o ChatGPT atribuiu o DOI errado. O artigo que ele descreveu pode ou não existir.
• "DOI not found" → o DOI é fabricado. A referência é falsa.

Tempo por referência: 15-30 segundos.

Passo 4: Verificação em Lote com uma Ferramenta Automatizada

Se o ChatGPT te deu mais do que algumas referências, verificar cada uma manualmente leva muito tempo. Cole sua lista completa de referências no Citation Checker do Citely.

A ferramenta analisa cada referência, consulta bancos de dados acadêmicos e compara os metadados campo por campo. Para cada referência, ela informa:

• Similaridade de título — existe um artigo com este título?
• Similaridade de autor — os nomes dos autores correspondem ao registro do banco de dados?
• Similaridade de data — o ano de publicação está correto?

Referências que atingem 100% em todas as três dimensões são verificadas. Qualquer coisa abaixo disso é sinalizada para revisão manual.

Tempo para 10 referências: menos de 1 minuto.

Passo 5: Substitua as Falsificações

Para cada referência que falhar na verificação, você tem duas opções:

Opção A: Encontre o artigo real. A referência falsa do ChatGPT muitas vezes contém um grão de verdade — o tópico está correto, o nome do autor é real, o periódico existe. Use esses fragmentos para procurar o artigo real que a IA estava "pensando".

Cole o tópico da referência falsa no Source Finder do Citely. Ele pesquisa em CrossRef, PubMed, OpenAlex, arXiv e Google Scholar para encontrar artigos reais que correspondam ao assunto. Escolha o resultado mais relevante e substitua a citação falsa.

Opção B: Remova a citação. Se a afirmação em seu trabalho não precisa daquela referência específica — ou se você não consegue encontrar um artigo real que a apoie — remova a citação completamente. Reescreva a frase para que se sustente sozinha ou cite uma fonte diferente que você já verificou.

Um Exemplo Prático

Veja como uma verificação típica de referência do ChatGPT se parece na prática:

O ChatGPT te deu:

Wang, L., & Martinez, R. (2023). Deep learning approaches to automated essay scoring: A comprehensive survey. Journal of Educational Technology, 45(2), 189-215. doi:10.1016/j.jedtech.2023.04.012

Passo 1 — Pesquisa de título: O Google Scholar retorna zero resultados para este título exato. Suspeito.

Passo 2 — Verificação de DOI: doi.org retorna "DOI not found". O DOI é fabricado.

Passo 3 — Verificação de autor: L. Wang é um pesquisador real que publica sobre tópicos de PNL. R. Martinez publica em tecnologia educacional. Mas eles nunca co-autoria deste artigo.

Veredito: Referência quimera. A IA combinou nomes de autores reais com um artigo plausível, mas fictício.

Correção: Pesquise "deep learning automated essay scoring survey" no Source Finder. Encontre um artigo de revisão real sobre este tópico. Substitua a citação falsa pela real.

Como Usar o ChatGPT para Referências Sem Se Queimar

Você não precisa parar de usar IA completamente. Aqui está um fluxo de trabalho que oferece os benefícios sem o risco:

1. Use a IA para descoberta, não para citação. Pergunte ao ChatGPT "Quais são os principais artigos sobre [tópico]?" Use suas sugestões como termos de busca, não como citações. Em seguida, encontre os artigos reais você mesmo.

2. Nunca copie e cole referências de IA diretamente em sua bibliografia. Sempre verifique primeiro, cite depois.

3. Peça ao ChatGPT estratégias de busca em vez de referências. "Quais palavras-chave devo pesquisar no Google Scholar para encontrar artigos sobre [tópico]?" é um prompt mais seguro do que "Dê-me 5 referências sobre [tópico]."

4. Execute uma verificação em lote antes do envio. Mesmo que você ache que verificou tudo, execute sua lista completa de referências através do Citation Checker como uma rede de segurança final. Ele detecta erros que você pode ter perdido — incluindo referências que estavam corretas quando você as adicionou, mas que foram retratadas desde então.

O Que Seu Professor Já Está Verificando

Se você acha que ninguém vai notar, considere o seguinte:

• Várias universidades agora exigem que os alunos verifiquem o conteúdo gerado por IA, incluindo listas de referência
• Editores de periódicos estão cada vez mais realizando verificações pontuais em listas de referência enviadas
• Uma única citação falsa pode desencadear uma revisão de integridade acadêmica
• O Retraction Watch publica casos de artigos retratados devido a referências fabricadas

O custo de verificar é de minutos. O custo de não verificar é potencialmente sua carreira acadêmica.

Principais Conclusões

• O ChatGPT e outros LLMs geram três tipos de citações falsas: artigos totalmente inventados, referências quimera combinando elementos reais e citações distorcidas com pequenos erros — nenhuma delas é recuperada de bancos de dados, são textos gerados estatisticamente
• Sempre trate as referências geradas por IA como não verificadas — pesquise cada título no Google Scholar e verifique cada DOI em doi.org antes de adicionar à sua bibliografia
• Para mais do que algumas referências, use um verificador de citações automatizado para verificar sua lista inteira em lote em menos de um minuto — a verificação manual em escala é impraticável
• Quando uma referência falsa for encontrada, encontre o artigo real que a IA estava aproximando (usando uma busca reversa de citação) ou remova a citação completamente — nunca deixe uma referência não verificada em seu trabalho
• Use a IA para descoberta de literatura (estratégias de busca, sugestões de tópicos) em vez de citação direta — isso obtém os benefícios de eficiência sem o risco de fabricação

Verifique suas referências → citely.ai/citation-checker