Robots meta tag e X-Robots-Tag definem como mecanismos de busca devem rastrear e indexar uma página. A diferença prática é simples: a meta tag robots fica no HTML da página, enquanto o X-Robots-Tag é enviado no HTTP header.
Se você administra um site WordPress e precisa decidir rápido onde aplicar cada regra, este guia mostra quando usar cada uma, como evitar conflitos e quais sinais observar no Google Search Console. O objetivo aqui é reduzir tentativa e erro com uma decisão baseada em intenção e comportamento do crawler.
Robots meta tag e X-Robots-Tag: o que cada um controla?
A lógica é a mesma nos dois casos: você orienta o robô sobre rastreamento (crawl) e indexação (index). As diretivas mais comuns são:
- noindex: impede que a página seja indexada.
- nofollow: impede que o robô siga links da página.
- noarchive: reduz a possibilidade de o Google exibir cópia em cache (quando aplicável).
- nosnippet e max-snippet: controlam trechos exibidos (quando aplicável).
- noimageindex: limita indexação de imagens (quando aplicável).
A diferença está no ponto de aplicação:
- Robots meta tag: aplicada por página, dentro do <head> do HTML.
- X-Robots-Tag: aplicada por resposta HTTP, afetando o recurso entregue pelo servidor.
Quando usar robots meta tag
Use a robots meta tag quando a decisão depende do conteúdo que está sendo renderizado naquela página específica.
Cenários comuns
- Páginas HTML específicas que você quer controlar individualmente (por exemplo, páginas de resultado interno, páginas de baixa utilidade ou páginas que você prefere não indexar).
- Quando você precisa mudar a regra com frequência conforme a página muda.
- Quando o controle por template resolve: você aplica a meta tag em um tipo de página e pronto.
Vantagens práticas
- Fica visível no código da página, o que facilita auditoria.
- É simples de aplicar em WordPress via templates/SEO plugin, desde que você revise o que está sendo gerado.
Quando usar X-Robots-Tag
Use o X-Robots-Tag quando você quer controlar a indexação no nível do servidor, de forma consistente para um recurso que pode não ser um HTML “normal” ou que varia independentemente do template.
Cenários comuns
- Arquivos não-HTML (por exemplo, PDFs e outros formatos), quando você precisa orientar indexação sem depender de HTML.
- Controle centralizado no servidor para diferentes rotas e respostas.
- Quando você quer garantir que a regra venha no HTTP mesmo que o HTML esteja incompleto ou varie por renderização.
Vantagens práticas
- Centraliza a decisão na resposta HTTP, útil para conteúdos servidos por rotas e formatos variados.
- Reduz o risco de esquecer a meta tag em um template específico.
Como escolher entre meta tag robots e X-Robots-Tag (regra rápida)
- Se você está decidindo por página HTML, comece pela robots meta tag.
- Se você está decidindo por tipo de resposta (HTTP header) ou por conteúdo não-HTML, use X-Robots-Tag.
- Se você tem múltiplas fontes de controle (plugin, tema, regras no servidor), defina uma fonte única para evitar conflitos.
Evite conflitos: meta tag e header podem se contradizer
O erro mais comum é configurar uma regra na meta tag e outra no header para o mesmo recurso. Quando isso acontece, você perde previsibilidade e dificulta a auditoria.
Como regra de operação:
- Escolha um método como principal para cada tipo de página/arquivo.
- Se precisar usar ambos, garanta que as diretivas sejam coerentes.
- Revise o que realmente está sendo entregue ao crawler (não apenas o que você “acha” que está configurado).
Como validar no Google Search Console
Depois de aplicar robots meta tag ou X-Robots-Tag, você precisa confirmar o efeito. O Search Console não “mostra” o header/meta diretamente como uma ferramenta de diagnóstico de rede, mas ajuda a observar o comportamento do site.
Sinais para observar
- Indexação: páginas que deveriam ficar fora do índice tendem a parar de aparecer como indexadas ao longo do tempo.
- Rastreamento e cobertura: use relatórios de cobertura para ver mudanças de status.
- Consultas e cliques (quando aplicável): se uma página era indexada e você colocou noindex, é esperado que ela perca visibilidade orgânica gradualmente.
Se o comportamento não mudar como esperado, investigue primeiro:
- Se a regra está sendo aplicada no recurso correto.
- Se existe conflito com outra configuração (plugin, tema, servidor).
- Se a página está bloqueada por outros meios (por exemplo, robots.txt) que podem afetar o resultado.
Erros comuns ao usar robots meta tag e X-Robots-Tag
- Aplicar noindex em páginas que precisam ranquear: isso elimina o potencial de indexação, então a página deixa de competir.
- Usar nofollow quando o objetivo era indexação: nofollow e noindex não são a mesma coisa. Se você quer impedir indexação, use noindex.
- Esquecer páginas variantes: paginações, parâmetros, versões com filtros e páginas “quase iguais” podem exigir regras consistentes.
- Confundir “não rastrear” com “não indexar”: dependendo do caso, você pode impedir rastreamento e ainda assim ter indexação parcial, ou vice-versa. Por isso, mantenha a regra alinhada ao objetivo.
Como aplicar no WordPress sem adivinhar
Em WordPress, a forma exata de implementar depende do seu setup (tema e plugins). O caminho mais seguro é:
- Liste as páginas/arquivos que você quer proteger (ex.: resultados internos, páginas de teste, arquivos específicos).
- Defina a regra (por exemplo, noindex para páginas que não devem entrar no índice).
- Escolha o método: meta tag para páginas HTML específicas ou X-Robots-Tag para controle mais “servidor” e recursos não-HTML.
- Implemente e depois valide no Search Console acompanhando cobertura e indexação.
Se você usa um plugin de SEO, revise as configurações para garantir que ele não esteja gerando meta robots em duplicidade com regras no servidor.
FAQ: dúvidas rápidas
Posso usar apenas um dos dois?
Sim. Para a maioria dos casos em HTML, a robots meta tag resolve. Para conteúdos não-HTML e para controle centralizado, o X-Robots-Tag costuma ser mais adequado. O ponto é manter consistência e evitar conflitos.
“noindex” impede que o Google siga links?
Não necessariamente. noindex controla indexação. Se você também quiser impedir seguir links, use nofollow (ou a diretiva equivalente aplicável ao seu caso). O objetivo deve guiar a combinação.
Quanto tempo leva para refletir?
Não existe um prazo único. A mudança depende de rastreamento, reprocessamento e do comportamento do mecanismo de busca. O que você pode fazer é acompanhar os relatórios de cobertura e indexação no Search Console e ajustar se necessário.
Quando faz sentido pedir ajuda para não errar
Se você administra um site com muitas variações de páginas (filtros, parâmetros, páginas de produto e categorias, páginas de busca interna) e já teve casos de indexação indesejada, vale revisar o “mapa” de regras. Pequenos conflitos entre plugins e configurações no servidor são uma causa frequente de comportamento inesperado.
Se você quer acelerar esse processo com mais consistência, a PlugnRank pode ajudar a organizar decisões de SEO on-page e a acompanhar sinais no Google Search Console para orientar próximos passos. O foco é reduzir trabalho manual e transformar observações em ações claras, sem prometer ranking.
Próximo passo: escolha uma lista curta de URLs (por exemplo, 5 a 10 páginas) que você quer controlar e defina se a regra deve ser aplicada via robots meta tag ou X-Robots-Tag. Depois, acompanhe no Search Console e ajuste com base no que realmente mudou.
Leave a Reply