Gerador Robots.txt

Gerador de Robots.txt

Padrão - Todos os robôs são:	Permitido Recusado
Atraso de rastreamento:	Padrão - Sem atraso 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
Sitemap: (deixe em branco se não tiver)
Robôs de pesquisa:	Google	Igual ao padrão Permitido Recusado
	Google Image	Igual ao padrão Permitido Recusado
	Google Mobile	Igual ao padrão Permitido Recusado
	MSN Search	Igual ao padrão Permitido Recusado
	Yahoo	Igual ao padrão Permitido Recusado
	Yahoo MM	Igual ao padrão Permitido Recusado
	Yahoo Blogs	Igual ao padrão Permitido Recusado
	Ask/Teoma	Igual ao padrão Permitido Recusado
	GigaBlast	Igual ao padrão Permitido Recusado
	DMOZ Checker	Igual ao padrão Permitido Recusado
	Nutch	Igual ao padrão Permitido Recusado
	Alexa/Wayback	Igual ao padrão Permitido Recusado
	Baidu	Igual ao padrão Permitido Recusado
	Naver	Igual ao padrão Permitido Recusado
	MSN PicSearch	Igual ao padrão Permitido Recusado
Diretórios restritos:	O caminho é relativo à raiz e deve conter uma barra final "/"

Agora, crie o arquivo 'robots.txt' em seu diretório raiz. Copie o texto acima e cole no arquivo de texto.

Sobre o Gerador de Robots.txt

O Gerador de Robots.txt é uma ferramenta essencial para otimização de mecanismos de busca (SEO). Ele permite que você crie facilmente o arquivo robots.txt para o seu site, controlando quais partes devem ser rastreadas ou ignoradas pelos motores de busca. Personalize as permissões para diferentes seções do seu site, melhorando a visibilidade online e garantindo uma indexação eficiente.