Problema con bot

Bienvenido(a), Visitante. Por favor Ingresar o Registrarse
¿Perdiste tu email de activación?.

Foro

Web

Blog

24 Abril 2024, 11:32 am

Tema destacado: (TUTORIAL) Aprende a emular Sentinel Dongle By Yapis

Foro de elhacker.net

Programación

Desarrollo Web (Moderador: #!drvy)

Problema con bot

0 Usuarios y 1 Visitante están viendo este tema.

Páginas: [1]

Autor

Tema: Problema con bot (Leído 1,777 veces)

diego_lp

Desconectado

Mensajes: 180

In a free world, who needs gates and windows?

Problema con bot

« en: 8 Diciembre 2010, 17:47 pm »

Hola a todos, tengo problemas para controlar el trafico no visto de mi sitio web por los distintos bots.
Eh configurado el archivo robots.txt de la siguiente manera:

Código:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

User-agent: bot
Disallow: /

User-agent: bot*
Disallow: /

Quisiera saber si esta bien configurado el archivo para que los bots no entren en los subdirectorios de mi public_html a buscar informacion y/o si me pueden dar algun otro consejo al respecto.
Muchas gracias.
Saludos.


	En línea

Los programadores hicimos un pacto con Dios, él no hace sistemas y nosotros no hacemos milagros!

~ Yoya ~

Wiki

Desconectado

Mensajes: 1.125

Re: Problema con bot

« Respuesta #1 en: 9 Diciembre 2010, 00:58 am »

Cita de: http://bit.ly/17mhqA

El fichero robots.txt es un archivo de texto que dicta unas recomendaciones para que todos los crawlers y robots de buscadores cumplan (ojo! recomendaciones, no obligaciones).

Teniendo en cuenta esa información, yo veo bien el archivo robots.txt que usas...


	En línea

Mi madre me dijo que estoy destinado a ser pobre toda la vida.
Engineering is the art of balancing the benefits and drawbacks of any approach.

Páginas: [1]

Ir a:

Mensajes similares
	Asunto	Iniciado por	Respuestas	Vistas	Último mensaje
	Problema BlueZScanner y problema de conexión Hacking Mobile	Kasswed	3	6,300	6 Mayo 2006, 22:04 pm por Gospel