Google planeja aceitar sinal comum no robots.txt para recusar treino de IA

O Google anunciou em 30 de outubro de 2026 que planeja aceitar um controle compartilhado de treinamento de IA no robots.txt. A ideia é permitir que um site declare sua preferência sobre treinamento para vários provedores de IA em um único passo, com suporte previsto para 2027.

No Google Search Central, em texto de 30 de outubro, a empresa explica que a proposta se apoia no trabalho do grupo AIPREF, da Internet Engineering Task Force (IETF). Em vez de manter instruções separadas para cada desenvolvedor de IA, o dono do site poderá usar um "policy token" comum dentro do robots.txt para definir preferências amplas entre os provedores participantes.

O Google oferece desde 2023 o Google-Extended, seu controle próprio de treinamento de IA. Quando um site usar o token comum para recusar o treinamento e não especificar o Google-Extended, a empresa planeja interpretar isso como se o publisher tivesse bloqueado o Google-Extended. Outros provedores podem tratar o sinal de forma parecida, o que permitiria recusar todos de uma vez ou escolher caso a caso.

Controles individuais continuam valendo

Os controles de cada empresa seguem funcionando ao lado do sinal conjunto. Um site pode expressar uma escolha ampla pelo sinal da indústria e ajustar as instruções para desenvolvedores específicos, como o Google, por meio do Google-Extended. A empresa acrescenta que sites que permitem especificamente o Google-Extended podem aparecer nas respostas e receber cliques via grounding nos Gemini Apps.

O mecanismo leva aos donos de sites a definição de treinamento de IA desenvolvida na IETF, enquanto continuam as discussões entre as partes interessadas sobre o restante do vocabulário do AIPREF. Segundo o Google, à medida que mais empresas adotarem o mecanismo, o acesso ao sinal de preferência será antecipado e cada vez maior.

Proposta ainda em rascunho

O Google descreve o texto como uma proposta em rascunho, que reflete o retorno de publishers, grupos da sociedade civil, reguladores e outras partes que pediram controles para toda a indústria. A empresa afirma que a proposta é coerente com o Código de Práticas da União Europeia para provedores de modelos de IA de uso geral, ligado ao AI Act, que reconhece o robots.txt como método principal para publishers expressarem preferências legíveis por máquina. O refinamento e a padronização seguem no grupo de trabalho da IETF.

"Pretendemos oferecer suporte a esse novo controle junto com outros provedores de IA em 2027 e daremos atualizações sobre o nosso progresso", escreveu John Mueller, Google Search Advocate.

Para quem cuida de marca, a mudança prevista é operacional: em vez de uma instrução por desenvolvedor, uma preferência poderá valer para vários provedores de uma vez, com ajustes individuais quando fizer sentido. Há um ponto a observar na escolha, porque o Google liga a permissão explícita ao Google-Extended à possibilidade de aparecer nas respostas e receber cliques via grounding nos Gemini Apps. O anúncio não nomeia os outros provedores participantes nem traz o nome do token, e o suporte ainda é um objetivo para 2027.