Tema: Romper respuesta 403 de milanuncios
Ver Mensaje Individual
  #2 (permalink)  
Antiguo 20/08/2015, 01:30
Avatar de lauser
lauser
Moderator Unix/Linux
  
Fecha de Ingreso: julio-2013
Ubicación: Odessa (Ukrania)
Mensajes: 3.278
Antigüedad: 10 años, 9 meses
Puntos: 401
Respuesta: Romper respuesta 403 de milanuncios
Aparte de que lo que pretendes,,, no es nada ético. Deberias haber empezado por revisar su robots....
Código : 
Ver original
  1. User-agent: *
  2. Disallow: */lugar/
  3. Disallow: */contacta/
  4. Disallow: */compartir/
  5. Disallow: */email/
  6. Disallow: */datos-contacto/
  7. Disallow: */contactos-*/
  8. Disallow: /*/*estafa*
  9. Disallow: /*/*zoofilia*
  10. Disallow: /index.php*
  11. Disallow: /*.php*
  12. Allow: /*/*.htm
  13.  
  14. User-agent: e-SocietyRobot
  15. Disallow: /
  16.  
  17. User-agent: UbiCrawler
  18. Disallow: /
  19.  
  20. User-agent: DOC
  21. Disallow: /
  22.  
  23. User-agent: Zao
  24. Disallow: /
  25.  
  26. User-agent: sitecheck.internetseer.com
  27. Disallow: /
  28.  
  29. User-agent: Zealbot
  30. Disallow: /
  31.  
  32. User-agent: SiteSnagger
  33. Disallow: /
  34.  
  35. User-agent: WebStripper
  36. Disallow: /
  37.  
  38. User-agent: WebCopier
  39. Disallow: /
  40.  
  41. User-agent: Fetch
  42. Disallow: /
  43.  
  44. User-agent: Offline Explorer
  45. Disallow: /
  46.  
  47. User-agent: Teleport
  48. Disallow: /
  49.  
  50. User-agent: TeleportPro
  51. Disallow: /
  52.  
  53. User-agent: WebZIP
  54. Disallow: /
  55.  
  56. User-agent: linko
  57. Disallow: /
  58.  
  59. User-agent: HTTrack
  60. Disallow: /
  61.  
  62. User-agent: Microsoft.URL.Control
  63. Disallow: /
  64.  
  65. User-agent: Xenu
  66. Disallow: /
  67.  
  68. User-agent: larbin
  69. Disallow: /
  70.  
  71. User-agent: libwww
  72. Disallow: /
  73.  
  74. User-agent: ZyBORG
  75. Disallow: /
  76.  
  77. User-agent: Download Ninja
  78. Disallow: /
  79.  
  80. User-agent: wget
  81. Disallow: /
  82.  
  83. User-agent: grub-client
  84. Disallow: /
  85.  
  86. User-agent: NPBot
  87. Disallow: /
  88.  
  89. User-agent: WebReaper
  90. Disallow: /
  91.  
  92. User-agent: psbot
  93. Disallow: /
  94.  
  95. User-agent: Exabot
  96. Disallow: /
  97.  
  98. User-agent: Speedy
  99. Disallow: /
  100.  
  101. User-agent: Yandex
  102. Disallow: /
  103.  
  104. User-agent: dotbot
  105. Disallow: /
  106.  
  107. User-agent: Bloglines/3.1
  108. Disallow: /
  109.  
  110. User-agent: Mail.Ru
  111. Disallow: /
  112.  
  113. User-agent: Jyxobot/1
  114. Disallow: /
  115.  
  116. User-agent: cityreview
  117. Disallow: /
__________________
Los usuarios que te responden, lo hacen altruistamente y sin ánimo de lucro con el único fin de ayudarte. Se paciente y agradecido.
-SOLOLINUX-