Foros del web, para los que viven de bits

Hola, tengo un problema muy grave, y es que una serie de robots, me estan consumiendo mucha transferencia mensual y me gustaría bloquearlos con el htaccess, pero no se como, los robots a bloquear son los siguientes:

https://1000enlaces.com/webstat/

Si mirais el mes de abril del 2008 vereis claramente en "Top 10 of 5302 Total Sites By KBytes" que host1-240-dynamic.16-79-r.retail.telecomitalia.it, entre otros me estan consumiendo unos 465mb por visita.

Cómo puedo bloquearlos, ayudarme por favor.

Si el robot se identifica como tal con un determinado User-Agent puede hacerlo así:
Y si siempre hace las peticiones desde la misma IP, por ejemplo la 123.45.67.89 puedes hacerlo asi

Hola, gracias por contestar, por ejemplo, si quiero prohibir el acceso a los siguientes User - agents, como quedaría:

quiero bloquear a los siguientes:

41.red-213-96-88.staticip.rima-tde.net
host1-240-dynamic.16-79-r.retail.telecomitalia.it
94.red-88-9-9.dynamicip.rima-tde.net
host48-198-dynamic.18-79-r.retail.telecomitalia.it
76.red-83-40-62.dynamicip.rima-tde.net
191.pool85-49-164.dynamic.orange.es
66.red-88-11-184.dynamicip.rima-tde.net

y las siguientes ip:

84.76.227.222
81.172.127.234

Un Saludo

Simplemente tienes que poner varias lineas con "SetEnvIfNoCase User-Agent ..." y con "SetEnvIf Remote_Addr ..." asignandole la expresión a una variable. En el ejemplo que te puse era "nopermitido". Asi luego con "Deny from env=nopermitido" le prohibes el acceso a todos los casos definidos anteriormente.

Puedes probarlo añadiendo a la lista de IP la de tu propio PC e intentando acceder a cualquier fichero. Si lo has hecho bien el navegador te debería mostrar un error HTTP 403 "Access Denied/Forbidden).

me queda una cosa asi:


SetEnvIfNoCase User-Agent "41.red-213-96-88.staticip.rima-tde.net" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "host1-240-dynamic.16-79-r.retail.telecomitalia.it" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "94.red-88-9-9.dynamicip.rima-tde.net" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "host48-198-dynamic.18-79-r.retail.telecomitalia.it" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "76.red-83-40-62.dynamicip.rima-tde.net" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "191.pool85-49-164.dynamic.orange.es" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "84.124.198.95.dyn.user.ono.com" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIfNoCase User-Agent "66.red-88-11-184.dynamicip.rima-tde.net" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIf Remote_Addr "^81\.172\.127\.234$" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

SetEnvIf Remote_Addr "^84\.76\.227\.222$" nopermitido
Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido


Esta bien no?
Un Saludo,

NO hace falta repecir las partes comunes.
Puedes poner:
Pero de todas formas esas cadenas no pareces ser del campo "User-Agent", más bien parecen del campo IP (pero sin formato IP). Verifica el formato de tu fichero de log y coge los campos correctos.

ok ok, lo he hecho como ip.

de tal manera que me queda asi

SetEnvIf Remote_Addr "^66\.88\.11\.184$" nopermitido
SetEnvIf Remote_Addr "^81\.172\.127\.234$" nopermitido
SetEnvIf Remote_Addr "^84\.76\.227\.222$" nopermitido
SetEnvIf Remote_Addr "^83\.42\.219\.54$" nopermitido

Options -Indexes -Includes
Order allow,deny
Allow from all
Deny from env=nopermitido

Un Saludo,