Hola lauser
Ante todo muchísimas gracias por tu respuesta. Te aseguro que no pretendo utilizar datos de milanuncios para mi enriquecimiento ni nada parecido. Mi intención es utilizar solo datos de mis anuncios publicados ya que tengo casi un centenar, como por ejemplo las visitas que tengo a según que hora del día. Para mi la ética también es importante solo pretendo automatizar algunas vistas.
No había pensado ni por asomo en los robots, creí que tuviera alguna especie de restricción del servidor.
Pero tengo una duda, se supone que este robot niega el acceso a los user-Agent que están especificados en la lista. El User-Agent que yo especifiqué fue :
Código:
Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/44.0.2403.155 Safari/537.36
Código PHP:
<?php
$ch = curl_init();
curl_setopt ($ch, CURLOPT_URL, 'http://www.milanuncios.es/');
curl_setopt ($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/44.0.2403.155 Safari/537.36');
curl_setopt ($ch, CURLOPT_HTTPHEADER, array("Accept-Language: es-es, en"));
curl_setopt ($ch, CURLOPT_TIMEOUT, 10);
curl_setopt ($ch, CURLOPT_FOLLOWLOCATION, 1);
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);
$contenido = curl_exec ($ch);
curl_close ($ch);
echo $contenido;
?>
¿A que puede ser debida esta restricción ?
Gracias