Tema: Archivo robots bien hecho
Ver Mensaje Individual
  #1 (permalink)  
Antiguo 12/05/2013, 01:57
Avatar de patilanz
patilanz
 
Fecha de Ingreso: enero-2012
Mensajes: 880
Antigüedad: 12 años, 3 meses
Puntos: 29
Archivo robots bien hecho
Hola quiero preguntar si este archivo funciona bien:

Código robots: 
Ver original
  1. User-agent: Googlebot*
  2. Disallow:/*.js$
  3. Crawl-delay: 10
  4. Sitemap: http://pladurprueba.p.ht/sitemap.xml
  5.  
  6. User-agent: Googlebot-Image*
  7. Disallow:/*.js$
  8. Sitemap: http://pladurprueba.p.ht/sitemap.xml
  9.  
  10. User-agent: Bingbot*
  11. Disallow:/*.js$
  12. Crawl-delay: 10
  13. Sitemap: http://pladurprueba.p.ht/sitemap.xml
  14.  
  15. User-agent: *
  16. Disallow:/messages.php
  17. Disallow:/login.php

O sea si hay algún fallo que pueda bloquear todo el sitio y que no permita la indexacion del sitio web.