O Microsoft Clarity anunciou, em 23 de junho de 2026, uma nova funcionalidade que detecta e exibe violações de robots.txt cometidas por crawlers e bots de inteligência artificial.
Com o recurso, quem trabalha com a produção de conteúdo para web e profissionais de SEO conseguem identificar quais bots estão ignorando as regras de acesso definidas para o site, por meio da documentação.
Neste artigo, falaremos sobre a novidade lançada pela Microsoft e em quais pontos pode ajudar profissionais de SEO. Não esqueça de adicionar a Experta Media como sua fonte de notícias preferencial no Google, clicando no botão abaixo, para não perder nada.
O que é e para que serve o robots.txt
O documento conhecido como robots.txt é utilizado na raiz do servidor para instruir bots e crawlers do que pode, ou não, ser acessado e indexado nos motores de busca e nas LLMs (large language models).
Flávia Crizanto, fundadora da Experta, agência de SEO e GEO e apresentadora do Otimização Semanal, explicou, no episódio 44, o que é e para que serve a documentação:
“Um documento que a gente coloca no nosso site para autorizar ou não a chegada de robôs ou esclarecer melhor isso, mas a gente sabe que não é determinante”.
Em resumo, o arquivo funciona como uma orientação e não como uma barreira técnica que impede, definitivamente, o acesso.
Leia também: Entenda o que é OKF e ARD
Como funciona o novo recurso de monitoramento de bots do Clarity?
O novo recurso traz um espaço em que as violações com o percentual de requisições não autorizadas serão exibidas. Além disso, será possível visualizar:
- Linha de tendência ao longo do tempo;
- Filtros (operador, nome do bot, tipo de atividade);
- Conferir quais URLs estão sendo acessadas indevidamente;
- Comparação entre acessos permitidos ou não permitidos.
A nova função do Microsoft Clarity chamou a atenção do mercado de SEO por oferecer um monitoramento detalhado, e Flávia comentou, no Otimização Semanal, sobre os benefícios:
“Dentro do Microsoft Clarity agora, ele vai ajudar a mostrar quando os bots solicitam acesso a essas URLs bloqueadas, os operadores, nome dos bots e caminhos afetados (…) Com esses dados, o profissional consegue ver quando os bots não estão respeitando as regras de acesso do robots.txt”.
Leia também: Como adaptar sua estratégia de SEO para a redução de cliques?
Passo a passo: Como ativar e usar o bot analytics no seu site
Para utilizar o recurso, é preciso conectar uma CDN compatível através da seção de “Visibilidade de IA” nas configurações.
Sites com o plugin Clarity para WordPress na versão mais recente já têm acesso automático à funcionalidade; entretanto, as versões mais antigas precisarão ser atualizadas para acessar o recurso.
Abaixo trazemos uma tabela dos passos para acessar e utilizar a nova funcionalidade, de acordo com o blog oficial do Clarity.
| Passo | O que fazer no painel? | O que você descobre ali? |
| 01 | Abra o seu projeto no Clarity e acesse a aba Bot Analytics. | O ponto de partida central para monitorar todo o tráfego automatizado do seu site. |
| 02 | Localize o cartão Violations (Violações). | A porcentagem exata de requisições de bots que estão ignorando o seu arquivo robots.txt. |
| 03 | Use os filtros avançados (por operador, nome do bot e tipo de atividade). | Quais crawlers específicos estão burlando as suas regras. |
| 04 | Revise a lista de URLs, caminhos e tipos de conteúdo afetados. | Quais páginas privadas ou conteúdos de alto valor estão atraindo os olhares dos bots. |
| 05 | Compare o gráfico de requisições Conformes vs. Não Conformes. | Os padrões de comportamento ao longo do tempo, ajudando você a decidir quais estratégias adotar. |
Leia também: Qual a responsabilidade legal das empresas ligadas às IAs?
SEO e visibilidade de IA: A encontrabilidade da Experta
Hoje, o grande desejo entre as empresas é ser a resposta que o ChatGPT, o Gemini ou qualquer outra LLM entregam quando um cliente em potencial pede uma recomendação. Muitos gestores acreditam que, para ser citado pelas IAs, basta deixar as portas do site totalmente abertas e esperar. Entretanto, a realidade é bem diferente.
Conquistar visibilidade na era da IA exige um equilíbrio entre ações estratégicas para ser citado e precauções técnicas para não ter seu conteúdo utilizado sem a inclusão de fontes. O monitoramento de dados também é essencial para definir as melhores estratégias de acesso dos bots.
Na Experta executamos ambos os lados para que possamos acelerar o crescimento de nossos clientes sem colocá-los em risco. Se você quer que sua marca seja recomendada pelas principais ferramentas do mercado, mas com a segurança e a estratégia de SEO que o seu negócio exige, fale com a Experta e descubra como o nosso serviço pode te ajudar.