Foros del Web » Programando para Internet » PHP »

Como bloquear Baidu y Bing ??

Estas en el tema de Como bloquear Baidu y Bing ?? en el foro de PHP en Foros del Web. pues eso quiero que mi web solo la indexe Google y Yahoo he leido por ahi que debia de hacerlo desde el archivo robots.txt y ...
  #1 (permalink)  
Antiguo 30/07/2011, 06:35
Avatar de Demokan  
Fecha de Ingreso: marzo-2010
Mensajes: 41
Antigüedad: 9 años, 5 meses
Puntos: 2
Como bloquear Baidu y Bing ??

pues eso quiero que mi web solo la indexe Google y Yahoo
he leido por ahi que debia de hacerlo desde el archivo robots.txt
y asi lo tengo yo ahora

Código:
User-agent: msnbot
Disallow: /

User-agent: bingbot
Disallow: /

User-agent: Baiduspider
Disallow: /

User-agent: Orthogaffe
Disallow: /

User-agent: UbiCrawler
Disallow: /

User-agent: DOC
Disallow: /

User-agent: Zao
Disallow: /

User-agent: sitecheck.internetseer.com
Disallow: /

User-agent: Zealbot
Disallow: /

User-agent: MSIECrawler
Disallow: /

User-agent: SiteSnagger
Disallow: /

User-agent: WebStripper
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: Fetch
Disallow: /

User-agent: Offline Explorer
Disallow: /

User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: WebZIP
Disallow: /

User-agent: linko
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: Xenu
Disallow: /

User-agent: larbin
Disallow: /

User-agent: libwww
Disallow: /

User-agent: ZyBORG
Disallow: /

User-agent: Download Ninja
Disallow: /

User-agent: wget
Disallow: /

User-agent: grub-client
Disallow: /

User-agent: k2spider
Disallow: /

User-agent: NPBot
Disallow: /

User-agent: WebReaper
Disallow: /
el problema es que tanto baidu como bing me siguen apareciendo
que debo de hacer para que mi web solo la indexe los dos buscadores que menciono arriba ???

Imagen Capturada despues de tener el archivo de robots actualizado

  #2 (permalink)  
Antiguo 30/07/2011, 06:58
Avatar de zeuslife  
Fecha de Ingreso: enero-2008
Ubicación: Madrid
Mensajes: 533
Antigüedad: 11 años, 7 meses
Puntos: 11
Respuesta: Como bloquear Baidu y Bing ??

Yo veo más facil permitir de base solo yahoo y google (marcando esos dos en especial), y a continuacíon prohibir el resto (User-Agent: *)
__________________
Neversyn Software e Ingeniería
  #3 (permalink)  
Antiguo 31/07/2011, 00:42
Avatar de Demokan  
Fecha de Ingreso: marzo-2010
Mensajes: 41
Antigüedad: 9 años, 5 meses
Puntos: 2
Respuesta: Como bloquear Baidu y Bing ??

Cita:
Iniciado por zeuslife Ver Mensaje
Yo veo más facil permitir de base solo yahoo y google (marcando esos dos en especial), y a continuacíon prohibir el resto (User-Agent: *)
tengo entendido que los robots de por si siempre rastrean el tema es bloquearlos y yo los estoy bloqueando...pero siguen igual

Etiquetas: baidu, bing, bot, rastreador, buscadores
Atención: Estás leyendo un tema que no tiene actividad desde hace más de 6 MESES, te recomendamos abrir un Nuevo tema en lugar de responder al actual.
Respuesta




La zona horaria es GMT -6. Ahora son las 23:09.