O que é Meta Name Robots Content Noindex Follow
A meta tag robots é um elemento HTML que comunica diretamente aos mecanismos de busca como devem tratar uma página específica. Quando você escreve <meta name="robots" content="noindex, follow">, está instruindo os rastreadores (crawlers) dos buscadores a respeito de dois comportamentos distintos: não indexar o conteúdo da página, mas seguir os links que ela contém.
Essa combinação particular — noindex com follow — representa um caso de uso específico e deliberado. Diferentemente de outras combinações como "noindex, nofollow" ou "index, follow", a configuração noindex, follow permite que você mantenha a autoridade de link (link equity) fluindo através dos links internos da página, enquanto impede que o próprio conteúdo apareça nos resultados de busca.
Componentes da Meta Tag Robots
A estrutura completa da meta tag possui três partes essenciais:
- Elemento HTML:
<meta>— uma tag de metadados que fornece informações sobre o documento - Atributo name:
name="robots"— especifica que a instrução se destina a todos os mecanismos de busca (ou você pode usar nomes específicos como "googlebot" ou "bingbot") - Atributo content:
content="noindex, follow"— define as diretivas que controlam o comportamento do rastreador
O atributo content pode conter uma ou múltiplas diretivas separadas por vírgulas. Cada diretiva controla um aspecto diferente de como os buscadores interagem com a página.
As Diretivas Noindex e Follow Explicadas
Noindex instrui o mecanismo de busca a não adicionar a página ao seu índice. Isso significa que a página não aparecerá nos resultados de busca, independentemente de quão relevante ela seja para uma consulta. O rastreador ainda visitará a página e lerá seu conteúdo, mas simplesmente não a armazenará no banco de dados indexado.
Follow instrui o rastreador a seguir todos os links presentes na página e rastreá-los como normalmente faria. Quando um rastreador encontra um link em uma página com a diretiva follow, ele adiciona esse link à fila de rastreamento e eventualmente o visita. Isso permite que a autoridade de página (PageRank ou conceitos similares) seja transmitida através dos links internos e externos.
Juntas, essas diretivas criam um cenário onde a página funciona como um intermediário: ela não compete por posições de busca, mas suas recomendações de links (através do follow) ainda influenciam o ranking de outras páginas.
Por Que Essa Combinação Importa
A combinação noindex, follow é menos comum do que outras opções, mas possui aplicações estratégicas bem definidas. Ela é importante porque resolve um problema específico: você precisa que os links em uma página sejam rastreados e processados, mas não quer que a própria página compita por visibilidade de busca.
Cenários onde isso é relevante incluem páginas de filtros em e-commerce, páginas de resultado de busca internas, páginas de versão duplicada para usuários específicos, ou páginas de transição que servem principalmente para navegação interna. Em cada caso, o conteúdo pode ter valor para usuários internos ou para estruturação do site, mas não deve aparecer como resultado de busca independente.
Como a Meta Tag Robots Funciona Tecnicamente
Quando um rastreador de mecanismo de busca solicita uma página, ele recebe o código HTML da resposta do servidor. Durante o processamento dessa página, o rastreador lê a seção <head> do documento e procura especificamente pela meta tag robots (ou pela meta tag específica do bot, como googlebot).
Assim que encontra a meta tag, o rastreador interpreta as diretivas no atributo content. Dependendo dessas diretivas, o rastreador toma decisões sobre:
- Se deve adicionar a página ao índice (controlado por index/noindex)
- Se deve seguir os links presentes na página (controlado por follow/nofollow)
- Se deve armazenar em cache uma cópia da página (controlado por cache/noarchive)
- Se deve exibir trechos de texto nos resultados (controlado por snippet/nosnippet)
- Se deve exibir uma imagem em miniatura (controlado por imageindex/noimageindex)
No caso específico de noindex, follow, o rastreador imediatamente marca a página como "não indexar" em seus registros internos. Porém, ele continua processando os links encontrados na página, adicionando-os à fila de rastreamento e tratando-os como links normais para fins de transmissão de autoridade.
Diferenças Entre Variações Comuns
| Diretiva | Página Indexada | Links Seguidos | Caso de Uso |
|---|---|---|---|
| index, follow | Sim | Sim | Páginas normais que você quer que apareçam em buscas |
| noindex, follow | Não | Sim | Páginas de filtro, duplicatas, páginas de transição |
| index, nofollow | Sim | Não | Páginas que você quer indexadas mas cujos links não devem ser seguidos |
| noindex, nofollow | Não | Não | Páginas de administração, áreas privadas, conteúdo sensível |
Essa tabela ilustra como cada combinação serve a um propósito diferente. A escolha entre elas depende inteiramente de seus objetivos para cada página específica.
Posicionamento Correto da Meta Tag
A meta tag robots deve ser colocada na seção <head> do documento HTML, não no corpo da página. A localização exata dentro do head não importa tecnicamente, mas é uma prática comum colocá-la perto de outras meta tags como description e viewport.
Um exemplo de posicionamento correto:
<head>
<meta charset="UTF-8">
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<meta name="description" content="Descrição da página">
<meta name="robots" content="noindex, follow">
<title>Título da Página</title>
</head>Se a meta tag robots não estiver presente em uma página, os mecanismos de busca assumem o comportamento padrão, que é "index, follow" — a página será indexada e seus links serão seguidos.
Especificidade de Bots Individuais
Embora name="robots" seja a forma genérica que se aplica a todos os mecanismos de busca, você também pode direcionar bots específicos. Por exemplo:
<meta name="googlebot" content="noindex, follow">— aplica-se apenas ao Google<meta name="bingbot" content="noindex, follow">— aplica-se apenas ao Bing<meta name="slurp" content="noindex, follow">— aplica-se ao Yahoo
Essa abordagem é útil quando você quer comportamentos diferentes para diferentes mecanismos de busca, embora isso seja raro na prática. A maioria dos sites usa a meta tag genérica robots para manter a consistência.
Interação com Outros Métodos de Controle
A meta tag robots não é o único método para controlar o rastreamento e indexação. Ela funciona em conjunto com:
- Arquivo robots.txt: Um arquivo no diretório raiz do site que fornece instruções de rastreamento em nível de diretório ou arquivo
- Headers HTTP: Diretivas X-Robots-Tag enviadas nos headers HTTP da resposta
- Canonicalização: A tag rel="canonical" que indica qual versão de uma página é a preferida
- Diretivas de sitemap: Indicadores no arquivo sitemap.xml sobre quais páginas devem ser rastreadas
Quando múltiplos métodos entram em conflito, os mecanismos de busca geralmente seguem uma hierarquia: robots.txt é mais restritivo e pode bloquear o rastreamento antes que a meta tag seja lida, enquanto a meta tag robots é mais específica que o robots.txt para uma página individual.
Por Que Não Usar Noindex, Nofollow em Seu Lugar
Uma pergunta frequente é: por que não usar simplesmente noindex, nofollow se você não quer que a página seja indexada? A resposta está na eficiência do rastreamento e na transmissão de autoridade.
Quando você usa noindex, nofollow, o rastreador não segue os links na página. Isso significa que qualquer link para outras páginas do seu site não transmite autoridade. Se esses links são importantes para a navegação interna ou para a estrutura do site, você está perdendo uma oportunidade de fortalecer outras páginas.
Com noindex, follow, você mantém essa transmissão de autoridade enquanto impede que a página em si apareça em resultados. É uma escolha mais estratégica quando você entende a diferença entre indexação e rastreamento de links.
Estratégia Prática e Tática de Implementação
A implementação eficaz de meta name="robots" content="noindex, follow" exige compreensão clara de quando usar essa combinação, como implementá-la corretamente em diferentes plataformas e quais erros evitar. Esta seção fornece um roteiro prático desde o diagnóstico inicial até a verificação de conformidade.
Identificar Páginas Candidatas para Noindex, Follow
Antes de implementar qualquer meta tag, você precisa identificar quais páginas realmente se beneficiam dessa diretiva. A seleção incorreta pode prejudicar a visibilidade do seu site.
Páginas de filtro e facetas de e-commerce são candidatas principais. Quando um usuário aplica filtros de cor, tamanho ou preço em um site de vendas, a URL muda, criando múltiplas versões do mesmo conteúdo. Indexar todas essas variações desperdiça o orçamento de rastreamento do Google e dilui a autoridade de link. Nesses casos, noindex, follow permite que o Google siga links para produtos únicos sem indexar as páginas de filtro em si.
Páginas de resultados de busca interna funcionam de forma similar. Um site com ferramenta de pesquisa gera URLs diferentes para cada consulta. Essas páginas raramente agregam valor nos resultados de busca e frequentemente contêm conteúdo duplicado ou de baixa qualidade. Noindex, follow garante que o Google rastreie links de resultados sem indexá-los.
Páginas de agradecimento ou confirmação após envio de formulário são candidatas óbvias. Essas páginas não oferecem valor nos resultados de busca e podem conter informações sensíveis. Aplicar noindex, follow mantém o fluxo de rastreamento sem expor essas páginas publicamente.
Versões impressoras ou versões para dispositivos móveis alternativas (quando não utiliza design responsivo) devem receber noindex, follow. Isso evita duplicação enquanto permite que o Google descubra conteúdo relacionado.
Páginas de categoria com conteúdo mínimo que servem principalmente como navegação também se beneficiam dessa abordagem, especialmente quando o conteúdo real reside em páginas filhas.
Páginas que não devem receber essa tag incluem: conteúdo principal de alto valor, páginas de produto ou serviço, artigos de blog, páginas de destino e qualquer página que você deseja que apareça nos resultados de busca.
Auditoria Prévia e Análise de Impacto
Antes de implementar mudanças em massa, execute uma auditoria completa para entender o estado atual.
Use o Google Search Console para verificar quais páginas estão atualmente indexadas. Filtre por seções do site que você planeja modificar. Observe o volume de impressões e cliques para cada página. Se uma página de filtro está recebendo cliques, isso pode indicar que usuários a encontram útil nos resultados de busca, sugerindo que noindex pode não ser apropriado.
Analise o padrão de links internos. Identifique quais páginas recebem links de outras páginas do seu site. Se uma página de filtro recebe links de múltiplas páginas importantes, remover sua indexação pode fragmentar a distribuição de autoridade. Nesse caso, você pode preferir usar a diretiva canonical em vez de noindex.
Verifique o volume de tráfego de busca orgânico atual para essas páginas usando ferramentas de análise. Se uma página de filtro está gerando tráfego significativo, implementar noindex reduzirá esse tráfego. Essa pode ser uma troca aceitável se o tráfego vem de consultas irrelevantes, mas requer consideração.
Documente o estado atual. Crie uma planilha com URLs, meta tags existentes, volume de tráfego, número de links internos e número de links externos. Isso fornece uma linha de base para medir o impacto após implementação.
Implementação Técnica em Diferentes Plataformas
O método de implementação varia significativamente dependendo da sua plataforma.
WordPress e CMS Baseados em PHP
Em WordPress, a abordagem mais comum é usar um plugin de SEO como Yoast SEO, Rank Math ou All in One SEO Pack. Esses plugins fornecem interfaces visuais para gerenciar meta tags sem editar código.
Para implementar manualmente, edite o arquivo functions.php do seu tema ou crie um plugin customizado. Uma abordagem comum é adicionar a tag através de um hook WordPress:
add_action('wp_head', function() { if (is_page(array(123, 456))) { echo '<meta name="robots" content="noindex, follow">'; } });
Substitua os IDs de página pelos IDs reais das páginas que devem receber a tag. Essa abordagem oferece flexibilidade total, mas requer conhecimento técnico.
Se seu site usa um plugin de SEO, localize a seção de configurações de meta robots. Geralmente encontra-se em cada página ou post individual sob "SEO Settings". Marque a opção para noindex e certifique-se de que follow está selecionado (geralmente é o padrão).
Para páginas geradas dinamicamente, como resultados de busca interna, você pode usar regras condicionais no plugin. Por exemplo, no Yoast SEO, você pode criar regras que aplicam noindex, follow automaticamente a qualquer URL contendo ?s= (parâmetro de busca padrão do WordPress).
Magento e Plataformas de E-commerce
No Magento, a implementação ocorre através do painel administrativo. Navegue até Catalog > Products ou Catalog > Categories, dependendo do que você está modificando. Edite o item e procure pela seção "Search Engine Optimization".
Dentro dessa seção, encontre o campo "Robots". Selecione a opção apropriada. No Magento 2, as opções geralmente incluem "INDEX, FOLLOW", "NOINDEX, FOLLOW", "INDEX, NOFOLLOW" e "NOINDEX, NOFOLLOW". Selecione "NOINDEX, FOLLOW".
Para páginas de filtro em Magento, você pode aplicar a tag em nível de categoria. Edite a categoria, acesse a seção de SEO e defina robots como noindex, follow. Isso aplicará a configuração a todas as páginas de filtro dessa categoria automaticamente.
Alternativa: use extensões de SEO para Magento que fornecem gerenciamento mais granular. Algumas extensões permitem aplicar regras baseadas em padrões de URL, automatizando a aplicação da tag a múltiplas páginas.
Shopify
No Shopify, a implementação é mais limitada através da interface padrão. Para produtos e coleções, acesse o editor de cada item. Na seção de SEO, você encontra campos para título e descrição, mas não há interface visual para meta robots.
Para implementar noindex, follow em Shopify, você precisa editar o código do tema. Acesse Settings > Files > Theme files e localize o arquivo product.liquid ou collection.liquid. Adicione a meta tag manualmente no <head> da página.
Uma abordagem mais robusta é usar um aplicativo de SEO do Shopify que fornece interface para gerenciar meta robots. Alguns aplicativos permitem definir regras que aplicam noindex, follow automaticamente a tipos específicos de páginas.
Nuxt e Frameworks JavaScript
Em aplicações Nuxt, use o módulo @nuxtjs/meta ou @unhead/nuxt (dependendo da versão do Nuxt). Defina a meta tag no componente de página ou no arquivo de layout.
Exemplo em Nuxt 3:
definePageMeta({ robots: 'noindex, follow' })
Ou usando useHead:
useHead({ meta: [{ name: 'robots', content: 'noindex, follow' }] })
Para aplicar a tag condicionalmente baseado em parâmetros de rota, use a composable useRoute:
const route = useRoute(); if (route.query.filter) { useHead({ meta: [{ name: 'robots', content: 'noindex, follow' }] }); }
Em Next.js, use o componente Head ou a função getStaticProps/getServerSideProps para definir meta tags dinamicamente.
Implementação em Nível de Servidor
Para sites de alto volume ou arquiteturas complexas, considere implementar a meta tag em nível de servidor. Isso oferece controle centralizado e evita necessidade de modificar templates individuais.
Em Apache, use um módulo como mod_rewrite para detectar padrões de URL e adicionar headers de resposta. Embora meta tags sejam HTML (não headers HTTP), você pode usar um script que intercepta respostas e injeta a tag.
Em Nginx, use sub_filter para adicionar a meta tag ao HTML gerado. Exemplo:
location ~* /search/ { sub_filter '</head>' '<meta name="robots" content="noindex, follow"></head>'; sub_filter_once on; }
Em Node.js/Express, crie middleware que adiciona a meta tag baseado na rota:
app.use((req, res, next) => { if (req.path.includes('/filter/')) { res.locals.robots = 'noindex, follow'; } next(); });
Erros Comuns a Evitar
Erro 1: Usar noindex, follow em páginas que você quer que apareçam nos resultados de busca. Essa é a confusão mais comum. Se uma página é valiosa e deve ser descoberta via busca, não use noindex. Use index, follow (ou omita a tag completamente, pois é o padrão).
Erro 2: Implementar noindex, follow sem verificar links internos. Se você remove uma página do índice mas ela recebe links internos de páginas importantes, você está desperdiçando a oportunidade de passar autoridade. Considere usar canonical em vez de noindex se a página tem versões preferidas, ou remova os links internos se a página realmente não agrega valor.
Erro 3: Aplicar noindex, follow a páginas de categoria ou seção que servem como hubs de navegação. Muitos sites aplicam noindex a categorias para evitar "conteúdo duplicado", mas categorias frequentemente recebem links externos e tráfego de busca legítimo. Remover sua indexação reduz a visibilidade. Use noindex apenas se a categoria não tem valor independente.
Erro 4: Não verificar a implementação após o lançamento. Implementar a tag é apenas metade da batalha. Você precisa confirmar que ela foi implementada corretamente e que o Google a reconheceu.
Erro 5: Usar noindex, follow quando noindex, nofollow seria mais apropriado. Se uma página contém conteúdo de baixa qualidade, spam ou sensível, use noindex, nofollow. Use noindex, follow apenas quando você quer que o Google siga links para descobrir conteúdo melhor.
Erro 6: Implementar a tag inconsistentemente. Se você adiciona noindex, follow a algumas páginas de filtro mas não a outras, você cria confusão. Estabeleça critérios claros e aplique consistentemente.
Erro 7: Misturar meta tags conflitantes. Não adicione meta name="robots" content="noindex, follow" e simultaneamente meta name="googlebot" content="index, follow". Diferentes motores de busca podem interpretar conflitos de formas diferentes.
Erro 8: Esquecer de remover links externos apontando para páginas noindex. Se páginas externas linkam para suas páginas noindex, esse link é desperdiçado. Considere redirecionar ou consolidar essas páginas.
Verificação e Monitoramento Pós-Implementação
Após implementar a meta tag, execute verificações rigorosas para confirmar sucesso.
Verificação de código-fonte: Acesse cada página no navegador, clique com botão direito e selecione "View Page Source". Procure pela meta tag <meta name="robots" content="noindex, follow">. Confirme que ela está presente e corretamente formatada.
Uso de ferramentas de teste: Ferramentas como SEMrush, Ahrefs e Screaming Frog rastreiam sites e reportam meta tags encontradas. Execute uma auditoria completa do site e filtre por páginas com noindex. Verifique se apenas as páginas pretendidas têm a tag.
Google Search Console: Após alguns dias, verifique o Search Console. Acesse Coverage > Excluded. O Google deve reportar páginas como "Excluded by 'noindex' tag". Confirme que as páginas listadas são aquelas que você marcou como noindex.
Monitoramento de indexação: Use o comando site: no Google Search. Procure por site:seusite.com/filtro ou padrão de URL similar. As páginas noindex devem desaparecer dos resultados gradualmente (pode levar semanas).
Monitoramento de tráfego: Acompanhe o tráfego de busca orgânico após implementação. Você deve ver redução de tráfego para páginas noindex e potencial aumento para páginas que agora recebem mais autoridade. Se o tráfego cai dramaticamente em páginas que você não marcou como noindex, isso indica um problema.
Verificação de rastreamento: No Search Console, use o Inspect URL tool para verificar páginas específicas. O Google mostrará se a página é indexada ou excluída, e por quê.
Estratégia de Rollout Gradual
Para sites grandes, não implemente noindex, follow em todas as páginas candidatas simultaneamente. Use uma estratégia gradual.
Fase 1: Identifique um pequeno conjunto de páginas (50-100) que claramente se beneficiam de noindex, follow. Implemente a tag apenas nessas páginas. Monitore por 2-4 semanas.
Fase 2: Analise o impacto. Verifique se o tráfego de busca foi afetado conforme esperado, se páginas foram removidas do índice, e se não houve efeitos colaterais negativos. Se os resultados forem positivos, expanda para o próximo conjunto de páginas.
Fase 3: Implemente em lotes maiores, monitorando continuamente. Isso permite que você identifique e corrija problemas antes de afetar o site inteiro.
Essa abordagem conservadora reduz risco de impacto negativo não intencional no SEO do site.