Plain Reckoner
PT

Quem lê o seu site

Você é incomum no que você deixou as empresas de IA ler?

Fontes e limites
uma lista de 16,076 domínios que duas redes de anúncios identificam como clientes; lemos as regras de rastreamento de 1,020 editores Leia os dados e o método Como usar as ferramentas
Espaço de trabalho de análise gratuitoGrátis · Sem cadastro

O seu próprio arquivo

Leia o seu site do visão geral e marcaremos as vossas próprias fileiras abaixo.

O seu robots.txt é um arquivo curto na parte da frente do seu site que diz aos visitantes automatizados o que podem ler. Cada um desses visitantes é chamado de rastreador e chega sob o seu próprio nome. Nada sobre o seu é enviado para qualquer lado: lemos no seu navegador a partir da leitura mantida neste dispositivo.

O que mostram os arquivos de 1,020 editores

Sorteamos 1,200 domínios entre os 16,076 das listas públicas de duas redes de anúncios e lemos o robots.txt de cada um. Em 180 casos, não obtivemos um arquivo legível. Esses casos ficam fora da contagem; não são tratados como se permitissem tudo.Estas 7 linhas sobrepõem-se. Um arquivo que bloqueia um robô que poderia citá-lo também bloqueia pelo menos um robô. São 7 formas de olhar os mesmos 1,020 arquivos, não 7 grupos separados. A soma fica maior que a amostra.

  1. 776de 1,020Não encontramos nomes documentados de robôs de IA. As regras gerais do robots.txt ainda podem se aplicar; isso sozinho não comprova permissão para treinamento, elegibilidade para citações ou acesso real.
  2. 216de 1,020Bloqueie pelo menos um rastreador de IA da primeira página.
  3. 123de 1,020Bloqueie pelo menos um rastreador que teria enviado o leitor — o tipo que busca uma página porque alguém fez uma pergunta que responde, e então liga de volta.
  4. 28de 1,020Escreva o nome de um rastreador e deixe-o passar de qualquer maneira. O arquivo é lido em blocos — nomes primeiro, depois as regras que se aplicam a eles — de modo que uma lista de nomes sentados acima de uma regra que permite que tudo permita cada nome nele.
  5. 167de 1,020Nomeie pelo menos um rastreador que aparece na documentação atual da empresa, de modo que a linha não mantém nada fora.
  6. 23de 1,020Nome apenas rastreadores que já não existem. Nada é excluído, e o arquivo lê como proteção para qualquer um que o abra.
  7. 305de 1,020Carregue uma seção uma ferramenta ou uma rede de anúncios escrita e assinada com seu próprio nome, de modo que essas linhas não são a redação do editor.

Bloqueado, rastejante por rastejante

Usamos os mesmos 1,020 arquivos. Escolher qual robô bloquear é diferente de contar quantos são bloqueados: alguns coletam páginas para treinar modelos, uma questão de licença de uso; outros acessam uma página para responder a uma pergunta, uma questão de tráfego.

As duas linhas que valem a pena ler juntas são da OpenAI. ChatGPT-User busca uma página porque alguém fez uma pergunta que ele responde, e as ligações de resposta de volta; OAI-SearchBot apenas guarda páginas para buscas. Desses arquivos, 121 bloqueiam o primeiro e 4 bloqueiam o segundo: 11.9% contra 0.4%. A diferença é de pelo menos dez vezes, mas a amostra não permite maior precisão: com quatro casos, a proporção poderia ir de cerca de dez a bem mais de cem vezes.

  1. GPTBotColeta páginas para treinar um modelo206 de 1,020
  2. CCBotColeta páginas para treinar um modelo201 de 1,020
  3. ChatGPT-UserResponde a uma pergunta, e liga de volta121 de 1,020
  4. Google-ExtendedColeta páginas para treinar um modelo89 de 1,020
  5. ClaudeBotColeta páginas para treinar um modelo74 de 1,020
  6. PerplexidadeBotResponde a uma pergunta, e liga de volta7 de 1,020
  7. OAI-SearchBotResponde a uma pergunta, e liga de volta4 de 1,020
  8. Claude-UserResponde a uma pergunta, e liga de volta2 de 1,020
  9. Claude- SearchBotResponde a uma pergunta, e liga de volta2 de 1,020

Sobre o que isto é evidência

Os 1,020 arquivos representam apenas esses 1,020 arquivos. São pequenos sites financiados por anúncios em duas redes, não toda a web nem grandes editoras com acordos de IA. Editores sem rede de anúncios não aparecem na lista. O sorteio usou uma palavra inicial fixa (plainreckoner) em vez de depender do acaso, para que qualquer pessoa possa repetir o sorteio e obter os mesmos domínios. Cada rede recebeu a mesma parcela da amostra que tem na lista. Medido em 2026-09-02.

A primeira medição foi em 2026-09-01, com 106 arquivos; agora repetimos com 1,020. O quadro geral não mudou: antes 76% não mencionavam robôs de IA e agora são 76.1%. O uso de modelos de terceiros passou de 34% para 29.9%. A precisão melhorou: com 106 arquivos, a incerteza era de cerca de oito pontos para cada lado; com 1,020, cerca de dois ou três. As linhas mais raras ainda dependem de dois ou quatro arquivos e continuam pouco precisas.

Uma qualificação, e vem da própria empresa. Do rastreador que pega uma página porque alguém fez uma pergunta, OpenAI escreve:Como essas ações são iniciadas por um usuário, as regras do robots.txt podem não se aplicar. Portanto, as contas acima são o que os arquivos DIZEM, que é o que medimos e tudo o que reivindicamos. Se toda empresa age sobre o que um arquivo diz é uma pergunta separada, e a resposta honesta é que não medimos.

As duas redes não são iguais, e é por isso que a amostra é desenhada para corresponder à lista em vez de simplesmente pegar o que um rastreador atinge primeiro. A Raptive representa 43.5% da lista e 42.4% dos arquivos lidos; 60% dos seus arquivos não mencionam robôs de IA. A Mediavine representa 56.5% da lista e 57.6% dos arquivos lidos; 88% dos seus arquivos não mencionam robôs de IA. Ponderando cada rede em sua parte da lista em vez de sua parte dos arquivos que responderam move cada figura acima em menos de meio ponto.

O que cada arquivo permite é trabalhado em vez de procurar. O arquivo é lido em blocos — uma ou mais linhas que nomeiam rastreadores, então as regras que se aplicam a eles — então um arquivo empilhando trinta nomes acima de uma única regra que permite que tudo tenha permitido todos os trinta. Contando os nomes, em vez disso, relataria esse arquivo como o mais restrito na amostra.

O controle de IA de pesquisa do Google está separado do robots.txt

A configuração do Console de Pesquisa do Google em Configurações → Search generative AI controla se uma propriedade participa de Visão Geral de IA, Modo de IA e recursos de IA generativos no Discover. O Google diz que excluir um site remove seus links e conteúdo desses recursos, sem alterar o ranking ou os sinais de inclusão em outro lugar na Pesquisa. Controles Google-Extended treinamento separado e outros usos de IA; bloqueando-o não define esta escolha do Console de Busca.

Esta varredura pública não pode ler que a configuração privada, suas impressões de IA, conformidade real do rastreador ou renda de licenciamento. Os relatórios dedicados de IA descrevem visibilidade; as impressões por si só não revelam cliques perdidos ou o que teria acontecido em uma configuração diferente.Leia a documentação de controle do Googlee o seu anúncio de comunicação de IA.

Regras declaradas, pedidos reais e bloqueio são diferentes

Esta ferramenta lê regras publicadas. Para saber se um robô visitou o site ou foi bloqueado, consulte os registros do servidor ou da rede. A Cloudflare oferece configurações atuais do bot de IA separam atividades de busca, agentes e treinamento. As configurações padrão de novos domínios mudaram em 15 de setembro de 2026; robôs com usos mistos exigem atenção. Ler o robots.txt não verifica suas configurações da Cloudflare nem bloqueia acessos.

Meça a visibilidade da IA em seu próprio Console de Pesquisa

  1. Abra o relatório de desempenho de IA Generativa para sua propriedade verificada. Escolha um intervalo de data, dispositivo e escopo de país.
  2. Exportar as tabelas de Datas e Páginas separadamente como CSV. Manter os totais das propriedades separados dos totais das páginas; sua agregação difere.
  3. Compare as mesmas datas no relatório de resultados de pesquisa habitual. Mantenha impressões e cliques separados. Impressões de IA não são visitas extras e não devem ser adicionadas aos totais de pesquisa sobrepostas.
  4. Se disponível, compare os filtros Web: baseados em texto e Web: multimodal separadamente. Grave os filtros ao lado de cada exportação.

Google documentação do relatório explica que o relatório de IA pode estar ausente quando um site tem poucas impressões. anúncio multimodal cobre pesquisas conduzidas por imagens, como Lens. Não infer zero demanda ou perda de receita de um relatório perdido. Verificado 22 de outubro de 2026.