Por que o ChatGPT dá uma resposta diferente cada vez que você pergunta?

Como funciona

Quem pergunta ao ChatGPT "quem faz manutenção de ar-condicionado em Campinas?" e repete a pergunta minutos depois costuma ver outra lista. Isso não quer dizer que algo deu errado. Três coisas mudam de uma vez para a outra.

1. A busca é refeita. Documentado Quando a busca está ligada, o próprio ChatGPT decide se vale buscar na web para aquela pergunta, faz a busca e monta a resposta com o que encontrou. A resposta traz as páginas citadas e, à parte, a lista de tudo o que foi consultado, que costuma ser maior que a das citadas.¹ Uma busca nova pode abrir páginas diferentes, e páginas diferentes trazem nomes diferentes.

2. A escolha das palavras tem uma dose de sorte. Hipótese Esta é a nossa explicação, simplificada: um modelo de linguagem escreve a resposta escolhendo a próxima palavra entre várias possíveis, e essa escolha não é sempre a mesma. Entre cinco empresas que serviriam para a resposta, numa vez ele escreve três, na outra escreve outras três. A documentação da busca da OpenAI não descreve esse mecanismo; por isso a frase fica marcada como explicação nossa.

3. A pergunta chega sem histórico. Na nossa medição, cada pergunta vai numa chamada nova, sem conversa anterior, sem conta e sem memória (página Como medimos). No aplicativo, a resposta ainda pode mudar com a conta, o histórico e o lugar de onde a pessoa pergunta. É por isso que todo dado nosso traz o aviso "via API, pode diferir do aplicativo".

O tamanho da variação, medido

Medido Na rodada de ar-condicionado de 1º de novembro de 2026, fizemos as 10 perguntas do setor duas vezes, com cerca de duas horas de intervalo, em 21 cidades de São Paulo: 420 respostas do ChatGPT pela API com busca.² Para cada pergunta em cada cidade, comparamos a lista de empresas locais da primeira resposta com a da segunda pela sobreposição: as empresas que estão nas duas, divididas pelas que estão em pelo menos uma.

• Em média, a sobreposição foi de 0,41: de cada 10 empresas citadas em alguma das duas respostas, perto de 4 estavam nas duas.
• Em 19 dos 209 pares, as duas respostas citaram exatamente as mesmas empresas.
• Em 18 pares, não houve nenhuma empresa em comum.
• Das 485 empresas locais que o ChatGPT citou nas 21 cidades, 203 apareceram uma vez só, em 20 respostas da cidade.

Medido Em 27 de outubro de 2026, na primeira rodada, em 4 cidades e com 3 repetições no mesmo dia, a sobreposição média entre as repetições foi de 0,46, num total de 120 pares.³

Documentado Um estudo da BrightLocal publicado em setembro de 2026, com cerca de 200 mil buscas locais, mediu cerca de 23% de sobreposição entre repetições da mesma busca no ChatGPT.⁴ A amostra é de fora do Brasil (os exemplos do estudo são cidades dos Estados Unidos) e o desenho das repetições é outro, então o número não se compara direto com o nosso. As duas medições apontam para o mesmo lado: uma resposta sozinha muda muito.

O que fica estável

Uma resposta muda muito; a soma de muitas respostas, menos. Medido Nas 4 cidades medidas nas duas rodadas (Campinas, Ribeirão Preto, Sorocaba e São José do Rio Preto), das 10 empresas mais citadas pelo ChatGPT em 27 de outubro, 7 ou 8 continuavam entre as 10 mais citadas em 1º de novembro, cinco dias depois.²³

É por isso que medimos cada pergunta mais de uma vez e publicamos a taxa de aparição, "apareceu em 9 de 20 respostas", e não "está em primeiro lugar". Uma empresa que aparece em 9 de 20 tem presença; uma que aparece em 1 de 20 pode ter entrado por acaso.

E o Gemini?

Medido O Gemini que medimos responde sem busca, só com o que o modelo aprendeu no treino. Nas mesmas cidades e no mesmo dia, a sobreposição média entre as duas repetições do Gemini foi de 0,09: as listas quase não se repetiram.² Sem a busca para ancorar a resposta em páginas reais, os nomes variam ainda mais. Por isso o ChatGPT e o Gemini nunca se somam num número só.

O que isso muda para a empresa local

O dono que pergunta uma vez ao ChatGPT e não vê a própria empresa conclui que não aparece. O dono que aparece uma vez conclui que está bem. Nos nossos dados, as duas conclusões podem estar erradas.

1. Uma pergunta feita uma vez não serve de medida. Com a sobreposição média de 0,41, a mesma pergunta, feita de novo, troca mais da metade dos nomes. Para saber se a sua empresa aparece, repita a pergunta algumas vezes e conte em quantas respostas ela entrou.
2. Faça as perguntas que o cliente faz. As 10 perguntas do método cobrem intenções diferentes: quem faz, bem avaliadas, preço, perto de mim, orçamento, site e WhatsApp. Uma empresa pode aparecer em "quem faz" e sumir em "preço".
3. Pergunte em dias diferentes. A nossa variação foi medida no mesmo dia; de um dia para o outro, a busca pode trazer páginas novas.
4. Desconfie de quem vende posição. Se a resposta muda a cada pergunta, uma promessa de "primeiro lugar no ChatGPT" não tem como ser conferida. O que dá para trabalhar é a chance de ser citada: estar nas páginas que a busca encontra e que o ChatGPT cita.

Exemplo fictício: a "Clima Norte", de Sorocaba, aparece em 2 das 20 respostas do ChatGPT. Uma concorrente aparece em 11. A Clima Norte não está fora das respostas, mas entra pouco. A pergunta útil passa a ser em quais das 10 perguntas ela entra e por quê.

O que ainda não se sabe

• Quanto a resposta muda entre dias diferentes. As rodadas de 27 de outubro e de 1º de novembro de 2026 tiveram as repetições no mesmo dia. A próxima rodada de ar-condicionado repete cada pergunta em 3 dias diferentes, com as regras de leitura registradas antes da coleta.
• Quanto a API difere do aplicativo. O aplicativo usa conta, memória e localização exata; não medimos essa diferença ainda.
• Por que um nome entra e outro não numa resposta. Vemos as páginas citadas, mas a OpenAI não publica como o modelo escolhe entre elas.
• Se o modelo muda sem aviso. Registramos o modelo que respondeu em cada resposta; nas duas rodadas foi o mesmo, mas o provedor pode trocar.