Generador Robots.txt

Generador Robots.txt

Predeterminado: todos los robots son:	Permitido Negado
Rastreo-Retraso:	Predeterminado: sin demora 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
Mapa del sitio: (déjalo en blanco si no tienes)
Robots de búsqueda:	Google	Igual que el valor predeterminado Permitido Negado
	Google Image	Igual que el valor predeterminado Permitido Negado
	Google Mobile	Igual que el valor predeterminado Permitido Negado
	MSN Search	Igual que el valor predeterminado Permitido Negado
	Yahoo	Igual que el valor predeterminado Permitido Negado
	Yahoo MM	Igual que el valor predeterminado Permitido Negado
	Yahoo Blogs	Igual que el valor predeterminado Permitido Negado
	Ask/Teoma	Igual que el valor predeterminado Permitido Negado
	GigaBlast	Igual que el valor predeterminado Permitido Negado
	DMOZ Checker	Igual que el valor predeterminado Permitido Negado
	Nutch	Igual que el valor predeterminado Permitido Negado
	Alexa/Wayback	Igual que el valor predeterminado Permitido Negado
	Baidu	Igual que el valor predeterminado Permitido Negado
	Naver	Igual que el valor predeterminado Permitido Negado
	MSN PicSearch	Igual que el valor predeterminado Permitido Negado
Directorios restringidos:	La ruta es relativa a la raíz y debe contener una barra diagonal final "/"

Ahora, crea un archivo 'robots.txt' en tu directorio raíz. Copie el texto anterior y péguelo en el archivo de texto.

Generador Robots.txt

Una de les moltes eines per a l'optimització de motors de cerca (SEO) és el Generador de Robots.txt, fonamental per aconseguir millores en la visibilitat del teu lloc.