eliminar enlaces offline

[manuel__7]

Hola, necesito una gran ayuda... Tengo una web protectora de enlaces, por lo que en la base de datos se almacenan las url protegidas en el campo link, lo que deseo es un script php que me permita comprobar el estado de esos enlaces en linea, no de los enlaces protegidos, sino de los enlaces originales almacenados en la base de datos en el campo link, y de estar fuera de linea, que elimine el registro correspondiente en la base de datos...

Ejemplo:

protejo el enlace www.mega.com, la url protectora sería www.misitio.com?id=29209290; lo que deseo es diariamente revisar el enlace original, en este caso sería www.mega.com y si esta fuera de linea eliminarlo quedando fuera de linea la url www.misitio.com?id=29209290 la cual mostrara una pagina de error... Saludos

[linuxzero]

vas a tener que usar un cron para ejecutar el script diariamente y dependiendo del servidor windows o linux va a ser mas facil o no (facil en linux)

ahora bien, no existe actualmente segun creo yo algo que te resuelva en forma automatica si una url esta online o no, se puede hacer algo utilizando curl para veri si el sitio existe o no por ejemplo, no se si es lo mas confiable del mundo, pero es algo como para empezar

fijate el ejemplo que muestra en php.net para el uso de curl_errno(), vos modificalo para que en caso de error te haga el delete en la base de datos

[manuel__7]

Iniciado por linuxzero

vas a tener que usar un cron para ejecutar el script diariamente y dependiendo del servidor windows o linux va a ser mas facil o no (facil en linux)

ahora bien, no existe actualmente segun creo yo algo que te resuelva en forma automatica si una url esta online o no, se puede hacer algo utilizando curl para veri si el sitio existe o no por ejemplo, no se si es lo mas confiable del mundo, pero es algo como para empezar

fijate el ejemplo que muestra en php.net para el uso de [URL="http://www.php.net/manual/es/function.curl-errno.php"]curl_errno()[/URL], vos modificalo para que en caso de error te haga el delete en la base de datos

Quizas puedas ayudarme creando un codigo... Así iría entendiendo más o menos por cual es el camino a seguir... Saludos...

[webseficientes]

Para verificar que una web esta funcionando ok podrias leer el html de una de las paginas, tiene que ser un html "conocido" el que buscas.

Si esta es texto buscado, todo va bien, sino, es por que la web tuvo algún cambio o problema.

Opciones tenes muchas y funciones también, como decia el amigo, curl es una opción.

también tenes file_get_contens, y muchas otras para leer archivos y urls.

Suerte.

[stramin]

lo mejor sería hacerlo con curl, y la función que ha mencionado linuxzero queda perfecta!

Creo que no hace falta hacer el cron, puedes comprobar las urls antes de mostrarlas en la página, puedes probar a hacer llamadas curl y luego consultar si hay error con curl_errno, como dijo linuxzero, si hay error, no muestras el enlace y además lo eliminas de la BD.

eso si, se que hay otra forma más rápida de comprobar que he usado antes, pero no recuerdo cual era, pero era algo así como un ping a la página que devolvía true si existía y false si no... la buscaré

------------------- editado ------------------

Encontrado, una opción es usar exec con ping, algo así:

Código PHP:

$exec = exec("ping -n 3 -l 64 ".$url);
 

Pero encontré una mejor en php.net:

Código PHP:

$outputShell = shell_exec("ping -c 2 -w 2 ".$url);
if(strpos($outputShell, '0 received')){
// No se recibió respuesta, el servidor está out
}else{
// Se recibió respuesta, el servidor está online
}
 

(en windows 7 reemplazar "-c 2" por "-n 2"

[manuel__7]

Iniciado por stramin

lo mejor sería hacerlo con curl, y la función que ha mencionado linuxzero queda perfecta!

Creo que no hace falta hacer el cron, puedes comprobar las urls antes de mostrarlas en la página, puedes probar a hacer llamadas curl y luego consultar si hay error con curl_errno, como dijo linuxzero, si hay error, no muestras el enlace y además lo eliminas de la BD.

eso si, se que hay otra forma más rápida de comprobar que he usado antes, pero no recuerdo cual era, pero era algo así como un ping a la página que devolvía true si existía y false si no... la buscaré

------------------- editado ------------------

Encontrado, una opción es usar exec con ping, algo así:

Código PHP:

$exec = exec("ping -n 3 -l 64 ".$url);
 

Pero encontré una mejor en php.net:

Código PHP:

$outputShell = shell_exec("ping -c 2 -w 2 ".$url);
if(strpos($outputShell, '0 received')){
// No se recibió respuesta, el servidor está out
}else{
// Se recibió respuesta, el servidor está online
}
 

(en windows 7 reemplazar "-c 2" por "-n 2"

Muchas gracias, pero no me ha funcionado, todo enlace sea roto o no sale online,
yo más bien creo que la solución es reconocer un html como se explico más arriba, lo que no entiendo es como utilizar dicha función por lo que necesito así mismo un codigo inicial para orientarme, es urgente.... Saludos

[manuel__7]

Iniciado por webseficientes

Para verificar que una web esta funcionando ok podrias leer el html de una de las paginas, tiene que ser un html "conocido" el que buscas.

Si esta es texto buscado, todo va bien, sino, es por que la web tuvo algún cambio o problema.

Opciones tenes muchas y funciones también, como decia el amigo, curl es una opción.

también tenes file_get_contens, y muchas otras para leer archivos y urls.

Suerte.

Hola Ayúdame creando un pequeño código explicado para orientarme... Saludos...

[stramin]

En ese caso averigua sobre ambas funciones, no son difíciles de ocupar, revisa la documentación, aquí en el foro o en php.net

Libreria curl: http://php.net/manual/es/book.curl.php
Ejemplo: http://php.net/manual/es/curl.examples-basic.php

Funcion file_get_contents: http://cl.php.net/manual/es/function...t-contents.php

La otra forma que menciona webseficientes es la clase httpRequest: http://php.net/manual/es/class.httprequest.php

y la función http_request: http://cl.php.net/manual/es/function.http-request.php

Para más información puedes siempre recurrir al util aporte de abimaelrc: http://www.forosdelweb.com/f18/aport...equest-724214/

[manuel__7]

He avanzado mucho, pero aun no consigo lograrlo

1.- Este código obtiene los enlaces de www.ejemplo.com de acuerdo a la etiqueta <a href=""></a>:

Código PHP:

  <?php 
$html = file_get_contents('www.ejemplo.com'); 
function extract_links($html) { 
    $links = array(); 
    preg_match_all('/<a\s+.*?href=[\"\']?([^\"\' >]*)[\"\']?[^>]*>(.*?)<\/a>/i', $html,$matches,PREG_SET_ORDER); 
    foreach($matches as $match) { 
        $links[] = array($match[1],$match[2]); 
    } 
    return $links; 
} 
$links = extract_links($html); 
foreach ($links as $link) { 
    echo $link[0] . PHP_EOL; 
} 
?>   

,pero como hago para obtener otro tipo de etiquetas como input, img, etc?


2.- Esto me mostrara todos los <a href=""></a> existentes dicha página, pero cuando la página (www.ejemplo.com) tiene un iframe que llama a otra página que le provee enlaces aleatorios, como hago para obtener tambien esos enlaces (<a href=""></a>) desde www.ejemplo.com?


Sabiendo esto podría estoy muy cerca de lo que desearía hacer!

[manuel__7]

He avanzado mucho, pero aun no consigo lograrlo

1.- Este código obtiene los enlaces de www.ejemplo.com de acuerdo a la etiqueta <a href=""></a>:

Código PHP:

  <?php 
$html = file_get_contents('www.ejemplo.com'); 
function extract_links($html) { 
    $links = array(); 
    preg_match_all('/<a\s+.*?href=[\"\']?([^\"\' >]*)[\"\']?[^>]*>(.*?)<\/a>/i', $html,$matches,PREG_SET_ORDER); 
    foreach($matches as $match) { 
        $links[] = array($match[1],$match[2]); 
    } 
    return $links; 
} 
$links = extract_links($html); 
foreach ($links as $link) { 
    echo $link[0] . PHP_EOL; 
} 
?>   

,pero como hago para obtener otro tipo de etiquetas como input, img, etc?


2.- Esto me mostrara todos los <a href=""></a> existentes dicha página, pero cuando la página (www.ejemplo.com) tiene un iframe que llama a otra página que le provee enlaces aleatorios, como hago para obtener tambien esos enlaces (<a href=""></a>) desde www.ejemplo.com?


Sabiendo esto podría estoy muy cerca de lo que desearía hacer!

[manuel__7]

Iniciado por stramin

En ese caso averigua sobre ambas funciones, no son difíciles de ocupar, revisa la documentación, aquí en el foro o en php.net

Libreria curl: [url]http://php.net/manual/es/book.curl.php[/url]
Ejemplo: [url]http://php.net/manual/es/curl.examples-basic.php[/url]

Funcion file_get_contents: [url]http://cl.php.net/manual/es/function.file-get-contents.php[/url]

La otra forma que menciona webseficientes es la clase httpRequest: [url]http://php.net/manual/es/class.httprequest.php[/url]

y la función http_request: [url]http://cl.php.net/manual/es/function.http-request.php[/url]

Para más información puedes siempre recurrir al util aporte de abimaelrc: [url]http://www.forosdelweb.com/f18/aporte-file_get_contents-curl-http_request-724214/[/url]

He avanzado mucho, pero aun no consigo lograrlo

1.- Este código obtiene los enlaces de www.ejemplo.com de acuerdo a la etiqueta <a href=""></a>:

Código PHP:

  <?php 
$html = file_get_contents('www.ejemplo.com'); 
function extract_links($html) { 
    $links = array(); 
    preg_match_all('/<a\s+.*?href=[\"\']?([^\"\' >]*)[\"\']?[^>]*>(.*?)<\/a>/i', $html,$matches,PREG_SET_ORDER); 
    foreach($matches as $match) { 
        $links[] = array($match[1],$match[2]); 
    } 
    return $links; 
} 
$links = extract_links($html); 
foreach ($links as $link) { 
    echo $link[0] . PHP_EOL; 
} 
?>   

,pero como hago para obtener otro tipo de etiquetas como input, img, etc?


2.- Esto me mostrara todos los <a href=""></a> existentes dicha página, pero cuando la página (www.ejemplo.com) tiene un iframe que llama a otra página que le provee enlaces aleatorios, como hago para obtener tambien esos enlaces (<a href=""></a>) desde www.ejemplo.com?


Sabiendo esto podría estoy muy cerca de lo que desearía hacer!