Ver Mensaje Individual
  #3 (permalink)  
Antiguo 25/01/2005, 02:58
Ocrum2004
 
Fecha de Ingreso: agosto-2004
Mensajes: 513
Antigüedad: 19 años, 8 meses
Puntos: 5
Es de cuasar.com

Efectivamente es de cuasar.com, exactamente de la página:
http://www.cuasar.com/spider_beta/

No es nada malo, simplemente es un script que simula el spider de un buscador, para que podamos saber que es realmente lo que ven los buscadores cuando nos visitan.

Posiblemente en los próximos días Cuasarbot visite todas las páginas de tu web, ¡¡ ojala fuera capaz de crear un buscador !!

Si no deseas que Cuasarbot te visite puedes configurar el fichero robots.txt, ya que el spider interpreta el fichero.