Gerador de Robots.txt

Divulgue esta página

Robots.txt - Use Corretamente

Aprender como funciona o robots.txt é essencial para evitar acidentes como bloquear o acesso de webcrawlers (Googlebot, MSNbot, ...) ao site, bem como para evitar que algum conteúdo restrito fique disponível na web, ou, ainda, para proteger o site contra conteúdo duplicado interno.

Leia o artigo completo: Tutorial de Robots.txt.

Crie o seu Robots.txt Abaixo

Acesso Padrão do Robot

Regras Adicionais
Ação Robot Arquivos ou Diretórios
Sitemap.xml (opcional)

Seu Arquivo Robots.txt


Divulgue esta página