Como saber se o ChatGPT e o Gemini citam a sua marca

Abrir o ChatGPT, digitar a pergunta da sua categoria, ler a resposta e sair aliviado ou preocupado. Quase toda equipe já fez isso. Não é uma medição, e o motivo importa mais do que o veredito.

Faça a mesma pergunta duas vezes e virão dois parágrafos diferentes. Pergunte na sua própria conta e o modelo pode estar carregando o seu histórico. Pergunte amanhã e a busca na web por trás da resposta terá encontrado outro conjunto de páginas. Não há o que comparar, porque nada ficou parado.

Aqui vai o caminho para transformar isso em algo que cabe num relatório.

O que uma medição exige

Quatro coisas, e as quatro são entediantes.

Uma pergunta fixa. Escrita uma vez, nunca alterada, ou alterada com uma anotação do dia da mudança. No momento em que você mexe na redação, começou uma série nova.

Um modelo fixo. "ChatGPT" não é um modelo. A resposta do plano gratuito e a do plano mais caro divergem, e duas versões da mesma família também. Anote qual foi consultado.

Uma cadência fixa. Semanal basta para a maioria das categorias. Diária custa mais e se move menos do que as pessoas imaginam.

A resposta inteira, guardada. Este é o passo que costuma ser pulado, e é o que torna o resto defensável. Uma resposta armazenada permite mostrar ao cliente a frase exata que citou o concorrente. Uma nota sozinha mostra a ele um número em que não há razão para confiar.

O método, passo a passo

Escolha entre cinco e quinze perguntas. Misture as intenções: algo informacional ("o que é X"), algo comparativo ("X ou Y"), algo transacional ("qual X serve para uma equipe pequena"), algo navegacional (o nome da sua marca com um qualificador). É a mesma ideia de tratar a intenção, e não a palavra-chave, como a unidade. Intenções diferentes recuperam páginas diferentes, e um conjunto feito só de comparações vai dizer que a sua categoria é uma categoria de sites de review quando ela não é.

Defina quem conta como você. Sua marca tem grafias. A razão social, o nome curto, o nome do produto, o jeito como as pessoas erram ao digitar. Todas contam como uma única menção, senão vence a marca com mais apelidos, por nada.

Defina quem conta como rival. Nomeie os concorrentes antes de rodar. Descobrir concorrentes a partir das respostas é outro exercício, para depois; se a lista de rivais fica aberta, cada rodada produz um denominador diferente.

Rode, guarde e conte três coisas. Se a marca apareceu. Onde cai a primeira menção no texto, medida a partir do início. Quais domínios a resposta citou. Esse terceiro item é o dado que costuma surpreender as equipes.

Repita a mesma rodada em mais de um assistente. Eles não concordam entre si. Vemos com frequência uma marca citada por um e ausente do outro para a mesma pergunta na mesma semana, e é esse o argumento inteiro a favor de medir mais de uma superfície. Segurar o Google e perder o ChatGPT na mesma intenção é uma situação corriqueira, não uma anomalia.

As armadilhas

Perguntar o nome da própria marca. "O que você sabe sobre a Acme" vai produzir um parágrafo sobre a Acme. Claro que vai. Essa pergunta mede a memória do modelo, não a sua visibilidade numa decisão de compra. As perguntas úteis são aquelas em que o seu nome não está na entrada.

Acreditar na gentileza. Assistentes suavizam. Uma resposta que diz "a Acme é uma opção entre várias" e uma resposta que abre com a Acme são resultados diferentes, e uma contagem de sim ou não achata as duas na mesma coisa. Registrar onde cai a primeira menção é um jeito barato de preservar essa diferença.

Medir num modelo que o seu comprador não usa. Se quem pesquisa a sua categoria está no plano gratuito, é lá que a medição pertence. Escolher o modelo caro produz um gráfico mais simpático sobre uma população que não existe.

Transformar uma rodada em tendência. Dois pontos não formam uma linha. Espere um mês antes de dizer a alguém que o número está se movendo.

Confundir menção com tráfego. Uma menção é presença numa resposta. Não é uma visita, e não existe hoje relatório que diga quantas pessoas a viram. Quem vende volume de impressões em IA está modelando. Diga isso em voz alta antes que outra pessoa diga.

O que registramos, por rodada

No Crownler isso é um job agendado, e vale descrever com precisão, porque o formato do que fica guardado é o argumento todo.

Uma vez por semana, cada pergunta ativa vai ao ChatGPT, ao Claude e ao Gemini, com busca na web ligada, e a resposta completa é gravada no banco. Junto dela guardamos o modelo que respondeu, os tokens, o custo daquela chamada e o horário exato.

A partir do texto armazenado, uma passagem determinística extrai as menções. Determinística significa que nenhum segundo modelo é chamado para julgar: é comparação de texto com fronteira de palavra tolerante, de modo que "acme" não casa dentro de "acmetools" e um apelido de duas palavras ainda casa através de uma quebra de linha. Acertos sobrepostos na mesma posição contam uma vez, então uma marca com nome longo e apelido curto não dobra a própria pontuação.

Cada menção carrega a marca, a marcação de rival quando houver, o trecho ao redor, o deslocamento em caracteres da primeira aparição, quantas vezes apareceu, uma leitura de sentimento e a URL anexada quando a resposta anexou uma. O sentimento é uma heurística sobre as palavras numa janela de cento e vinte caracteres, e o descrevemos como heurística na tela também, porque ele é bom o bastante para separar um elogio de uma reclamação e não é bom o bastante para julgar uma marca.

À parte, guardamos cada fonte que a resposta citou, com seu domínio e sua posição na lista. Em algumas semanas isso vira um gráfico valioso: o punhado de domínios ao qual as respostas da sua categoria voltam sempre.

O Perplexity está no modelo de dados e ainda não está na rodada semanal, porque a chave dele não foi configurada do nosso lado. Preferimos dizer isso a executar uma chamada que sabemos que vai falhar e mostrar uma coluna vazia.

O que fazer com o resultado

Três movimentos, na ordem de frequência com que funcionam.

Vá atrás das fontes citadas, não da resposta. Se os mesmos três domínios alimentam toda resposta da sua categoria, estar ausente deles é o achado. Isso é um problema de relacionamento e de imprensa antes de ser um problema de conteúdo.

Conserte a página que deveria ter sido citada. Pegue a pergunta, encontre a página do seu site que a responde e leia as primeiras duzentas palavras como um estranho. Na maior parte das vezes, a página responde a pergunta no sexto parágrafo, depois do posicionamento.

Acompanhe a intenção entre superfícies, não a palavra-chave. A mesma intenção tem uma frente no Google e uma frente dentro de cada assistente, e elas se movem de forma independente. Tratá-las como um número só esconde a metade que está perdendo.

Cada passo acima funciona com uma planilha e um lembrete no calendário. A ferramenta existe porque fazer isso à mão para quarenta perguntas em três assistentes toda semana é o ponto em que as equipes param, em silêncio.

O Crownler faz as perguntas numa agenda, guarda cada resposta e mostra quem foi citado ao seu lado e quais fontes alimentaram a resposta. O que a ferramenta faz · Planos · O que é otimização para motores generativos, e o que não é · AI Overviews, medidos