O que é o arquivo robots.txt e para que serve?

O robots.txt é um arquivo de texto simples colocado na raiz do seu site (ex: seudominio.com.br/robots.txt) que instrui os robôs de busca (como o Googlebot) sobre quais páginas eles podem ou não rastrear.

O robots.txt impede que uma página apareça no Google?

Não necessariamente. O robots.txt impede o rastreamento, mas não a indexação se houver links externos apontando para a página. Para impedir totalmente a indexação, utilize a meta tag .

Onde devo hospedar o arquivo robots.txt?

Ele deve ser colocado exatamente no diretório raiz do seu servidor web (na pasta public/ no Next.js ou na raiz da sua hospedagem).

Webmaster & Rastreamento

Gerador de Robots.txt

Crie, visualize e baixe o arquivo robots.txt para orientar o Googlebot e mecanismos de busca de forma correta.

100% Gratuito

Sem Cadastro

Funciona no Celular

Acesso Padrão aos Robôs de Busca

Caminhos Bloqueados (Disallow)

Caminhos Permitidos (Allow)

URL do Sitemap XMLOpcional

robots.txt

# robots.txt gerado via BuscaAli (https://www.buscaali.com.br/ferramentas/gerador-robots)

User-agent: *
Disallow: /admin/
Disallow: /api/
Disallow: /checkout/
Allow: /

Sitemap: https://www.buscaali.com.br/sitemap.xml

📁 Onde salvar: Baixe o arquivo e envie para a pasta raiz do seu site (ex: public/robots.txt). Ele ficará acessível em seudominio.com.br/robots.txt.

Como Configurar um Arquivo Robots.txt Otimizado para SEO

O Gerador de Robots.txt do BuscaAli permite criar regras claras para proteger áreas administrativas, evitar consumo desnecessário de crawl budget (orçamento de rastreamento) e direcionar os robôs diretamente para o seu Sitemap XML.

Diretivas Principais do Robots.txt:

User-agent: * Aplica a regra a todos os motores de busca da internet.
Disallow: /pasta/ Proíbe o rastreamento de URLs que comecem com aquele caminho.
Allow: /pasta/ Libera especificamente um subdiretório dentro de um caminho bloqueado.
Sitemap: Aponta a URL absoluta do seu mapa de site XML para rápida descoberta de novos conteúdos.

Perguntas Frequentes sobre Gerador de Robots.txt

Procurando as melhores promoções da internet?

No BuscaAli auditamos cupons, histórico de preços e ofertas em tempo real em lojas como Amazon, Mercado Livre, KaBuM! e Shopee.

Ver Melhores Ofertas de Hoje

Outras Ferramentas Gratuitas

Ver todas

Gerador de Robots.txt

Como Configurar um Arquivo Robots.txt Otimizado para SEO

Diretivas Principais do Robots.txt:

Perguntas Frequentes sobre Gerador de Robots.txt

Procurando as melhores promoções da internet?

Outras Ferramentas Gratuitas

SEO Guardian Ultra (Auditor com IA)

Calculadora de Desconto

Calculadora de Economia

Calculadora de Parcelamento