Pular para o conteúdo

O que a IA sabe de cor sobre a sua marca

Por Knewin AI · · 4 min de leitura

Uma IA pode responder sobre a sua marca de dois jeitos. Com busca na web, ela procura antes e se apoia no que achou hoje. Sem busca, ela responde com o que aprendeu no treino, que tem data de corte e não mostra fonte. Quando o assistente responde sem pesquisar, é a segunda que aparece, e ela muda mais devagar do que a imprensa.

O Knewin AI é um assistente de IA para comunicação que responde por chat e mede a cobertura de imprensa da marca. As duas respostas entram na sondagem de presença em IA dele, que pergunta às IAs sobre a marca e o setor numa data. Por padrão, ela ouve Gemini, Claude, GPT e Grok, além da busca do Google. Você escolhe quais perguntas vão sem busca na web, e cada resposta dessas vem marcada como "sem busca".

Com busca e sem busca, duas perguntas diferentes

Com busca, a sondagem mede o que a IA encontra hoje: a resposta se apoia em sites, e a lista deles vem junto. Sem busca, ela mede o que o modelo carrega da marca, sem consultar nada.

As duas respostas podem divergir. A de memória pode descrever a marca por um produto antigo, por um executivo que já saiu ou por uma crise que já passou, enquanto a resposta com busca traz a matéria desta semana.

Com busca na webapoiada em 4 sites
  • cita o lançamento desta semana
  • descreve a Marca A pelo produto atual

Muda com a próxima matéria.

Sem busca na webnenhuma página citada
  • não sabe do lançamento
  • descreve a Marca A por um produto que ela deixou de vender

Muda quando o modelo é atualizado.

Exemplo ilustrativo. A mesma pergunta, feita ao mesmo modelo com e sem busca na web. A resposta de memória não aponta origem.

A memória da IA muda mais devagar

O que a IA sabe de cor muda quando o modelo é atualizado, e quem usa o assistente não escolhe quando isso acontece. Um fato velho tende a continuar na resposta de memória até a próxima versão do modelo.

É por isso que a pergunta sem busca vale a pena: ela mostra a versão da marca que a IA repete quando não pesquisa nada.

Como pedir a comparação

Peça na conversa, do jeito que perguntaria a alguém da equipe: "pergunte às IAs o que é a Marca A, uma vez com busca na web e outra sem". Você também pode mandar as suas próprias perguntas e dizer quais vão sem busca. Cada resposta de memória vem marcada, e dá para abrir qualquer uma inteira, do jeito que a IA escreveu.

A versão sem busca vai a Gemini, Claude, GPT e Grok, e cada resposta a mais gasta do limite semanal do plano. Se você pedir, o Knewin AI estima o gasto antes, sem perguntar nada às IAs.

A resposta de memória não cita página

Sem busca, a resposta não aponta de onde tirou o que disse, e isso é o esperado: ela vem da memória do modelo. A busca do Google fica de fora dessas perguntas, porque só responde buscando.

O que a IA afirma sai com o nome do modelo

No Knewin AI, cada afirmação da resposta de memória aparece como fala do modelo, com o nome de quem disse. Quando a leitura que o Knewin AI faz de cada resposta aponta uma afirmação possivelmente incorreta sobre a marca, ela aparece como lacuna, para a equipe conferir, porque essa leitura também é automática e pode errar. Vale comparar com a cobertura de imprensa: a afirmação que nenhuma matéria sustenta pode ser erro da IA, ou um fato que a imprensa não cobriu.

O que está ao alcance da equipe

A memória do modelo ninguém edita. O que dá para fazer é saber qual versão da marca a IA repete, comparar com a resposta com busca e ver se a cobertura de imprensa sustenta a versão de hoje. Se a resposta com busca já está certa, o problema aparece só quando o assistente não pesquisa. E o que está publicado hoje é parte do material de que as próximas versões dos modelos podem aprender.

Não há passado para medir

Não dá para perguntar a um modelo o que ele respondia antes. A resposta é datada no dia da sondagem, e a série começa na primeira medição: medir de novo em outro dia, na mesma conversa e com as mesmas perguntas e IAs, põe cada medição num ponto da série. Uma rotina, que repete um pedido na agenda que você marcar, pode refazer a sondagem sozinha.

Onde acompanhar

Como pedir a sondagem, inclusive as perguntas sem busca, está em Presença em IA e na ajuda, em /ajuda/presenca-em-ia. Por que, com busca, quase toda marca acaba citada está em Presença em IA: a taxa de menção engana.