Gerador Robots.txt

Gerador de Robots.txt


Padrão - Todos os robôs são:  
     
Atraso de rastreamento:
     
Sitemap: (deixe em branco se não tiver) 
     
Robôs de pesquisa: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Diretórios restritos: O caminho é relativo à raiz e deve conter uma barra final "/"
 
 
 
 
 
 
   



Agora, crie o arquivo 'robots.txt' em seu diretório raiz. Copie o texto acima e cole no arquivo de texto.


Sobre o Gerador de Robots.txt

O Gerador de Robots.txt é uma ferramenta essencial para otimização de mecanismos de busca (SEO). Ele permite que você crie facilmente o arquivo robots.txt para o seu site, controlando quais partes devem ser rastreadas ou ignoradas pelos motores de busca. Personalize as permissões para diferentes seções do seu site, melhorando a visibilidade online e garantindo uma indexação eficiente.