Nada, el maldito robot de yottaa sigue visitandome...
tengo ahora mismo esto:
Código:
User-agent: *
Allow: /
User-agent: YottaaMonitor
Disallow: /
User-agent: Yottaa-Monitor
Disallow: /
User-agent: Yottaa
Disallow: /
Y pasa de todo.
He visto que en 1and1 tienen una opcion para conectarse por ssh, voy a ver si desde ahi puedo sacar algun log...
Aun asi, si alguien le ha pasado alguna vez esto, y sabría decirme el nombre exacto que hay que poner en el robots, lo agradeceria...
O igual es que estoy poniendo mal el robots :\
EDIT: he encontrado en el log esto:
Código:
176.34.79.67 - - [27/Jun/2012:00:06:41 +0200] "GET / HTTP/1.1" 200 28214 www.domain.com "-" "YottaaMonitor" "-"
176.34.79.67 - - [27/Jun/2012:00:06:45 +0200] "GET / HTTP/1.1" 200 - domain.com "-" "YottaaMonitor" "-"
176.34.79.67 - - [27/Jun/2012:00:06:46 +0200] "GET / HTTP/1.1" 200 28214 www.domain.com "-" "YottaaMonitor" "-"
donde domain.com seria mi web, pero ya tengo puesto en el roboto "YottaaMonitor" y sigue visitandome :\
EDIT2: lo que he hecho ahora ha sido cambiar el orden, a ver si fuera por eso..
Código:
User-Agent: YottaaMonitor
Disallow: /
User-agent: *
Allow: /