Buenas tardes.
¿Alguien puede echarme una mano para evitar excesivo consumo de tráfico del tráfico no visto?
Recientemente he tenido problemas de consumo de tráfico del sitio.
El caso es que el Tráfico no visto me ha consumido todo el ancho de banda mensual.
El pasado mayo el Tráfico no visto no visto fue de 4.63Gb mientras que el tráfico visto fue de 690Mb (que es lo habitual más o menos).
Los datos de Mayo fueron los siguientes:
Unknown robot (identified by 'crawl') 102,423+426 2.96 GB 21 May 2018 - 00:05
Unknown robot (identified by 'bot' followed by a space or one of the following characters _+:,.;/\-) 17,201+2254 595.98 MB 21 May 2018 - 00:02
Unknown robot (identified by 'robot') 9,926+74 342.64 MB 21 May 2018 - 00:05
Unknown robot (identified by hit on 'robots.txt') 0+1094 179.09 KB 20 May 2018 - 23:48
A PHP script 857+1 14.67 MB 20 May 2018 - 22:33
Bing Preview bot 255 1.67 MB 18 May 2018 - 12:59
Unknown robot (identified by empty user agent string) 240+3 3.14 MB 19 May 2018 - 20:28
Googlebot 189+38 8.18 MB 20 May 2018 - 23:01
Unknown robot (identified by 'spider') 179+35 3.77 MB 20 May 2018 - 22:49
Common *nix tool for automating web document retireval. Most likely a bot. 109 5.30 MB 19 May 2018 - 19:29
Google Web Preview 88 586.66 KB 16 May 2018 - 21:36
Googlebot-Image 69 280.63 KB 20 May 2018 - 19:23
Yahoo Slurp 4+12 108.13 KB 20 May 2018 - 03:53
Alexa (IA Archiver) 2+4 128.64 KB 16 May 2018 - 13:16
Unknown robot (identified by 'bot' preceded by a space or one of the following characters _+:,.;/\-) 0+5 195 Bytes 10 May 2018 - 22:35
Y a 4 días de junio estamos asi:
Googlebot 3,306+3 140.78 MB 04 Jun 2018 - 00:04
Unknown robot (identified by 'bot' followed by a space or one of the following characters _+:,.;/\-) 781+64 41.36 MB 03 Jun 2018 - 23:50
Bing Preview bot 107 534.85 KB 03 Jun 2018 - 23:22
A PHP script 74 1.05 MB 03 Jun 2018 - 23:31
Googlebot-Image 30 203.91 KB 03 Jun 2018 - 23:29
Unknown robot (identified by 'spider') 17+7 1.19 MB 03 Jun 2018 - 23:21
Unknown robot (identified by 'robot') 7+5 232.16 KB 03 Jun 2018 - 05:49
Unknown robot (identified by 'crawl') 8+3 538.47 KB 03 Jun 2018 - 05:49
Unknown robot (identified by hit on 'robots.txt') 0+8 2.84 KB 03 Jun 2018 - 19:47
Yahoo Slurp 2+2 69.59 KB 01 Jun 2018 - 11:05
Unknown robot (identified by empty user agent string) 3 246.59 KB 03 Jun 2018 - 22:30
Unknown robot (identified by 'bot' preceded by a space or one of the following characters _+:,.;/\-) 2 51.12 KB 01 Jun 2018 - 15:46
Agradezco cualquier ayuda o aclaración del tema porque no veo cómo remediarlo.
Gracias.
Un saludo.