elhacker.net cabecera Bienvenido(a), Visitante. Por favor Ingresar o Registrarse
¿Perdiste tu email de activación?.

 

 


Tema destacado: Arreglado, de nuevo, el registro del warzone (wargame) de EHN


+  Foro de elhacker.net
|-+  Programación
| |-+  Desarrollo Web
| | |-+  PHP (Moderador: #!drvy)
| | | |-+  Sistema de Visitas con Deteccion de Bots o Webcrawlers ?
0 Usuarios y 1 Visitante están viendo este tema.
Páginas: 1 [2] Ir Abajo Respuesta Imprimir
Autor Tema: Sistema de Visitas con Deteccion de Bots o Webcrawlers ?  (Leído 8,699 veces)
Diabliyo


Desconectado Desconectado

Mensajes: 1.441


shell# _


Ver Perfil WWW
Re: Sistema de Visitas con Deteccion de Bots o Webcrawlers ?
« Respuesta #10 en: 23 Octubre 2017, 23:29 pm »

Que tal engel lex, disculpa por la demora pero he andado algo ocupado con el mismo tema y se me fue regresar a dar continuidad....

Te colo imagen de una de las varias IPs que simplemente no dan prenda para sacar si es o no un bot



Esa imagen es una forma en como dentro de mi sistema de trafico resguardo e identifico la informacion de los usuarios que acceden, como notaras en la ultima columna derecha se capturaron 5 variables: Referer, Request, UserAgent, Accept y Encoding.... La variable LANGUAGE_ENCODING no esta porque simplemente es un "flag" que se mando vacio, por ende el sistema no la guarda.

Para el caso de esa IP, no hubo de otra mas que hacerle "whois" para darse cuenta que es un Bot de la compa~ia OVH-SERVERS, esta compa~ia tiene un montononon de servidores entrando como locos a buscar paginas, y es uno de los servers que mas accesos generan en mis portales web, hasta mas que google....

Ye este es otro de los que mas dolores de cabeza cauzan, los bots Chingos y Koreanos :S... practicamente se comportan como un navegador y no dan prenda para detectarlos.



Y visitantes de plano como el de la sig. imagen son de los que no puedo etiquetar su Rango de IPs por que puede que sea una visita de usuario real o simplemente "una botnet en proceso"....



Finalmente este de plano es imposible... ya que haces whois veras que es el Bot de Google... Pero de entreda no rellena ningun campo: ni encode, ni useragent, nada.. solo el request y query.



Saludos !


« Última modificación: 24 Octubre 2017, 00:30 am por Diabliyo » En línea

engel lex
Moderador Global
***
Desconectado Desconectado

Mensajes: 15.514



Ver Perfil
Re: Sistema de Visitas con Deteccion de Bots o Webcrawlers ?
« Respuesta #11 en: 24 Octubre 2017, 01:15 am »

los de ovh no son necesariamenet bots....allí hay muchas vpn

Citar
practicamente se comportan como un navegador y no dan prenda para detectarlos.

en relación a qué? (ojo que de allá pueden ser usuarios en un monton de maquinas remotas para resolver captchas y todo eso... )


En línea

El problema con la sociedad actualmente radica en que todos creen que tienen el derecho de tener una opinión, y que esa opinión sea validada por todos, cuando lo correcto es que todos tengan derecho a una opinión, siempre y cuando esa opinión pueda ser ignorada, cuestionada, e incluso ser sujeta a burla, particularmente cuando no tiene sentido alguno.
Diabliyo


Desconectado Desconectado

Mensajes: 1.441


shell# _


Ver Perfil WWW
Re: Sistema de Visitas con Deteccion de Bots o Webcrawlers ?
« Respuesta #12 en: 24 Octubre 2017, 05:22 am »

Citar
en relación a qué?

Si, es determinar y diferenciar entre un bot y un usuario.

Citar
(ojo que de allá pueden ser usuarios en un monton de maquinas remotas para resolver captchas y todo eso... )

Como ?, no entendi eso... lo que si, es que especialmente ese sitio del que puse las imagenes no tiene Captcha, es solo informacion... Hasta los correos estan impresos como imagen mediante un script del sitio para evitar en lo mayor posible recibir spam.

Saludos !
En línea

engel lex
Moderador Global
***
Desconectado Desconectado

Mensajes: 15.514



Ver Perfil
Re: Sistema de Visitas con Deteccion de Bots o Webcrawlers ?
« Respuesta #13 en: 24 Octubre 2017, 05:52 am »

Si, es determinar y diferenciar entre un bot y un usuario.


metele javascript a eso! XD si buscas crawlers, eso buscas... comprotamiento
En línea

El problema con la sociedad actualmente radica en que todos creen que tienen el derecho de tener una opinión, y que esa opinión sea validada por todos, cuando lo correcto es que todos tengan derecho a una opinión, siempre y cuando esa opinión pueda ser ignorada, cuestionada, e incluso ser sujeta a burla, particularmente cuando no tiene sentido alguno.
#!drvy
Moderador
***
Desconectado Desconectado

Mensajes: 5.855



Ver Perfil WWW
Re: Sistema de Visitas con Deteccion de Bots o Webcrawlers ?
« Respuesta #14 en: 12 Noviembre 2017, 15:40 pm »

La primera imagen que colocas se podría decir que es un bot. Usa Firefox versión 25 en el userAgent y esa versión es como de hace 4 años.

Citar
otra mas que hacerle "whois" para darse cuenta que es un Bot de la compa~ia OVH-SERVERS, esta compa~ia tiene un montononon de servidores entrando como locos a buscar paginas,

OVH es un proveedor de servidores. Vende hosting, VPS y dedicados. No  tienen un montón de servidores entrando como locos.. tienen un montón de usuarios (son el proveedor N1 en el mundo) que hacen un montón de cosas incluido entrar como locos con sus bots a ciertas páginas. Pero también tienen usuarios y servicios legítimos.


@engel lex tiene razón. Con JS te cargas al 80% de los bots. Basta con que cuando el usuario entre a tu pagina, hagas que haga un request a una pagina especifica. Si ves que una IP no ha hecho ese request en 10s, lo tachas de bot.

Saludos
En línea

Páginas: 1 [2] Ir Arriba Respuesta Imprimir 

Ir a:  

Mensajes similares
Asunto Iniciado por Respuestas Vistas Último mensaje
Sistema de visitas?
PHP
HJ ~ 4 2,716 Último mensaje 7 Junio 2010, 14:53 pm
por :ohk<any>
Sistema de detección de intrusos
Seguridad
biancai 2 3,927 Último mensaje 16 Mayo 2011, 08:18 am
por sprito
Firma dinámica (Detección ip real y Sistema operativo) PHP
PHP
el-brujo 0 2,746 Último mensaje 16 Mayo 2012, 11:40 am
por el-brujo
sistema de visitas (contador)
PHP
gAb1 2 2,855 Último mensaje 8 Abril 2016, 22:38 pm
por gAb1
Sitios que se alimentan de publicidad reciben más visitas de bots que de ...
Noticias
wolfbcn 0 1,328 Último mensaje 26 Mayo 2017, 21:34 pm
por wolfbcn
WAP2 - Aviso Legal - Powered by SMF 1.1.21 | SMF © 2006-2008, Simple Machines