# Cloudflare Verified Bots: avaliados por bot, revogados por empresa

> URL: https://foura.ai/pt/blog/cloudflare-verified-bots-trust-bands
> Updated: 2026-11-11
> Index: https://foura.ai/llms.txt

## O Histórico de um Bot Pode Custar a Empresa Inteira

A Cloudflare explicou sua nova classificação de bots usando uma carteira de motorista: ela [diz quem alguém é](https://blog.cloudflare.com/verified-bots-accountability/), não se a pessoa vai dirigir de forma responsável no próximo ano. Boa analogia. Mas falta um detalhe. Uma carteira suspensa tira um motorista da estrada, e sob as regras da Cloudflare um histórico ruim pode derrubar todos os bots operados por uma empresa.

Em 16 de outubro, a Cloudflare afirmou que agora avalia bots Verified continuamente, com base em dois sinais até o momento: se o tráfego deles permanece consistente com o robots.txt de um site ao longo do tempo, e se eles reduzem o ritmo após um HTTP 429. Os resultados formam uma "faixa de confiança". Engenheiros lendo isso vão recorrer primeiro à lógica de retry, e o [artigo detalhado da Crawlbase sobre um loop de fetch com boa pontuação](https://crawlbase.com/blog/the-web-has-started-grading-crawlers/) é um bom ponto de partida.

Acreditamos que a lógica de retry seja a menor parte. Se você cria scrapers para terceiros, a pergunta que realmente importa é de quem é o nome no registro.

### O Que Realmente Foi Lançado

Menos do que as manchetes sugerem. A Cloudflare afirma que "já está usando este sistema internamente" enquanto constrói o histórico. Pontuações públicas no Radar e um limite que os proprietários de sites podem escolher estão descritos no tempo futuro, sem nenhuma data definida. Nada do que a Cloudflare publicou permite que um site bloqueie seu crawler com base em uma faixa de confiança ainda.

O escopo também é restrito. Apenas bots na lista de Verified são incluídos, e todo o restante não recebe pontuação alguma. Isso representa quase tudo: no Cloudflare Connect em outubro, a empresa afirmou que [menos de uma em cada dez requisições automatizadas](https://www.shashi.co/2026/10/cloudflare-warns-ai-agents-will-make.html) vem de um bot que se identifica.

Portanto, se o seu scraper não está nessa lista, este anúncio não pontua você.

**O que isso significa:** o registro ainda não está aberto para proprietários de sites, e a maior parte do tráfego automatizado não faz parte dele. Quem deve se preocupar agora são aqueles com um crawler listado, ou com planos de incluir um.

### A Penalidade Tem um Raio Maior do Que a Pontuação

Aqui está a parte que os artigos que lemos deixam de fora. A faixa de confiança descreve um bot. A consequência não precisa parar por aí. A [documentação de bots Verified](https://developers.cloudflare.com/bots/concepts/bot/verified-bots/) da Cloudflare, atualizada em 2 de novembro, afirma que "pode revogar o status de Verified para todos os bots e agentes pertencentes ou operados por uma organização" após violações repetidas, e cita o caso de uma empresa que "cumpre a política para um bot ou agente enquanto a viola com outro."

Pense nisso como uma agência pequena. Uma empresa, vários projetos de clientes, um único nome no diretório. Um cliente quer um catálogo até sexta-feira e pede para você aumentar a taxa. Se esse job mantiver o ritmo apesar dos 429s que recebe, e continuar fazendo isso, o custo não precisa ficar limitado a esse job. Ele pode recair sobre a empresa, e sobre todos os outros projetos executados sob ela.

A mesma página mostra por que isso agora se aplica a trabalhos comerciais. O BotBase, o diretório da Cloudflare, agora lista o comportamento "Data Collection", definido como "price scraping, competitive intelligence gathering, and third-party analytics." Ele fica ao lado de Search e Training. A coleta comercial pode ser uma atividade declarada e nominal, e consideramos isso uma boa notícia.

Mas veja os rótulos ao lado dele. Um bot é Direct (um único operador, geralmente em infraestrutura própria) ou Intermediary ("an agentic service that a wide range of end users can operate"). A Cloudflare chama o problema do segundo grupo de confiança transitiva: você pode confiar no operador sem confiar em todos que o utilizam, por isso ela está experimentando encaminhar detalhes sobre o usuário final. Uma agência de scraping é uma intermediária em tudo, exceto no papel.

### Um 429 nem sempre é sobre velocidade

O segundo sinal parece simples. A Cloudflare chama um 429 de "a directive for the visitor to reduce its request rate" e monitora se o tráfego diminui ou faz uma pausa depois disso.

Mas os sites usam esse status para mais do que apenas carga. [O Crawl Readiness testou os 1.000 principais do Tranco](https://www.crawlreadiness.com/research/ai-crawler-access-october-2026) em 12 de outubro, solicitando a cada página inicial uma visualização como navegador e depois como quatro crawlers de IA, cerca de dez requests por site sem nenhuma nova tentativa. Dos 78 sites que recusaram um crawler permitido pelo próprio robots.txt, 14 responderam com um 429 e nada mais (uma única passagem, apenas strings de user-agent, portanto trate isso como um indício).

Os autores deixaram esses casos de lado como possíveis rate limits, o que é uma postura prudente. Nós os interpretamos de forma diferente. Um site que entrega um 200 para um navegador e um 429 para um crawler identificado, após poucas requests, provavelmente não está relatando congestionamento. Ele está manifestando uma preferência usando o vocabulário de congestionamento.

Portanto, um avaliador que trata todo 429 como uma única instrução às vezes medirá a coisa errada, e o site raramente informa em qual caso você está. Um teto de simultaneidade, um limite por minuto e uma recusa direta chegam todos sob os mesmos três dígitos.

O cliente comum não ajuda. Muitos códigos de repetição aguardam o `Retry-After` e depois continuam na mesma taxa que gerou a recusa. O teste local da Crawlbase apresenta números: contra um limite de duas requests por segundo, um loop que manteve sua taxa anterior recebeu 13 recusas em 40 requests, enquanto um que reduziu seu teto recebeu 3 e ainda buscou mais páginas por segundo (1,11 contra 0,94). É um servidor de teste. O resultado prático ainda se mantém.

**O que isso significa:** se o seu bot está na lista de Verified, desacelerar é a resposta que a pontuação recompensa, e isso custa menos do que parece. Mas registre o que você recebeu, porque alguns desses 429s nunca foram sobre a sua velocidade.

### Assinar e obedecer estão se separando

A documentação do Google torna essa tensão visível. Sua página sobre [Web Bot Auth](https://developers.google.com/crawling/docs/crawlers-fetchers/web-bot-auth), atualizada pela última vez em 13 de outubro, afirma que um subconjunto das requests do Google-Agent é assinado, como um experimento. Sua página sobre [user-triggered fetchers](https://developers.google.com/crawling/docs/crawlers-fetchers/google-user-triggered-fetchers), onde o Google-Agent está listado, diz que, como um usuário solicitou a busca, esses fetchers "geralmente ignoram as regras do robots.txt."

Portanto, o Google está comprovando quem enviou uma request enquanto recusa o arquivo pelo qual todos os outros podem ser avaliados. O post da Cloudflare não explica como uma busca direcionada pelo usuário será julgada. Se você está criando agentes, esse é o limite a ser observado, porque "uma pessoa pediu isso" está prestes a ter muito peso.

## O Que Isso Significa para Quem Cria Scrapers para Clientes

**Organize seu trabalho de acordo com o nome associado a ele.** Um produto com seu próprio crawler público e um propósito claro é um forte candidato ao status de Verified. Uma infraestrutura executando tarefas de terceiros sob o nome da sua empresa é uma decisão mais arriscada, porque o job de um único cliente pode colocar a listagem em risco para todos os outros.

**Inclua regras de conduta de crawling no contrato.** Se um cliente pode solicitar uma taxa mais alta, o contrato deve definir quem assume as consequências. A partir do momento em que um 429 se torna um registro histórico, "apenas acelere" deixa de ser um pedido sem custo.

**Mantenha seus próprios logs.** Status, `Retry-After`, a taxa mantida antes e depois, por host. A Cloudflare promete uma faixa explicável, mas não disse como um operador contesta essa avaliação, e sem os seus próprios números, a versão do avaliador é a única que existe. É o mesmo hábito que [as diretrizes preliminares do EDPB](https://foura.ai/blog/edpb-web-scraping-guidelines-targeted) recompensam: ser capaz de demonstrar o que você coletou, de onde e quando.

**Pare de interpretar o robots.txt como uma autorização.** O post da Cloudflare diz isso diretamente: "não há qualquer implicação de que o que não foi declarado seja permitido." A [RFC 9309](https://www.rfc-editor.org/rfc/rfc9309.html) nunca foi uma licença, e agora alguém está pontuando contra ela.

## O Menu Suspenso que Ninguém Abre

Em agosto escrevemos que [a web estava classificando bots por finalidade, não por comportamento](https://foura.ai/blog/search-agent-training-bot-rules), e que configurações padrão são a forma como uma política se torna norma. O comportamento chegou dois meses depois. E o efeito do padrão já é mensurável: a análise da Crawlbase em 30 de outubro nos 2.000 principais sites do Tranco encontrou 71 sites com uma linha Content-Signal no robots.txt, 39 deles usando exatamente o padrão gerenciado pela Cloudflare. O modelo [pay-per-crawl](https://foura.ai/blog/pay-per-crawl-splits-the-web) precisava da mesma coisa que este modelo exige: um comprador com nome definido.

Nossa aposta: quando os limites de confiança forem lançados, a maioria dos sites aceitará o valor pré-selecionado, e a opinião de um site sobre o seu crawler será quase sempre um menu suspenso que ninguém abriu. Nós mesmos estamos em ambas as pontas deste status code. Quando um limite de plano interrompe uma chamada, a API da FourA [informa o limite](https://foura.ai/docs/api/rate-limits) e envia `Retry-After` apenas onde esperar resolve, e o Proxy Finder pausa uma saída sob rate limit para esse site específico, pelo tempo de espera indicado pelo seu `Retry-After`. Um 429 sempre foi uma solicitação. Está prestes a se tornar um registro.
