simple html dom failed to open stream für eine Website

Ich versuche zu analysieren, durch http://whatismyip.com Seite und meine Lage (Staat und Land). Die Daten zu sein scheint, innerhalb <table class="table"> tags, also ich bin auf der Suche nach "Tabelle".
Aber ich bekomme einen Fehler Warning: file_get_contents(https://whatismyip.com): failed to open stream: HTTP request failed! HTTP/1.1 403 Forbidden in C:\xampp4\htdocs\scraping\libs\simple_html_dom.php on line 1081

Kann nicht herausfinden, was falsch ist.

 <?php
        require_once('libs/simple_html_dom.php');
        $html=new simple_html_dom();

        $html->load_file('https://whatismyip.com');

        $element=$html->find("table");


    ?>
  • Sieht aus wie whatismyip.com blockt Sie ab, es zu tun
InformationsquelleAutor parsecer | 2016-05-24
  1. 5

    Website ist die überprüfung der User-Agent - header der Anfrage aber PHP nicht senden (standardmäßig). Sie müssen auf "annehmen" einen browser:

    $context = stream_context_create(array(
    'http' => array(
        'header' => array('User-Agent: Mozilla/5.0 (Windows; U; Windows NT 6.1; rv:2.2) Gecko/20110201'),
    ),
));

$html = file_get_contents('http://whatismyip.com/', false, $context);

//do what you want with the $html

    Bessere (und schnellere) Möglichkeit wäre die Verwendung einiger Bibliothek für diese. Ich habe GeoIP2-php vor, aber ich bin sicher, es gibt mehr.

    • Super, Arbeitete für mich.
    InformationsquelleAutor ShiraNai7
  2. 3

    im Grunde Ihre exemple es gut, aber der Fehler hier ist einfaches html-dom-Klassen funktioniert nicht mit Https, also versuchen Sie eine andere Methode 

    $curl = curl_init();
curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, FALSE);
curl_setopt($curl, CURLOPT_HEADER, false);
curl_setopt($curl, CURLOPT_FOLLOWLOCATION, true);
curl_setopt($curl, CURLOPT_URL, "https://whatismyip.com");
curl_setopt($curl, CURLOPT_REFERER, "https://whatismyip.com");
curl_setopt($curl, CURLOPT_RETURNTRANSFER, TRUE);
curl_setopt($curl, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows; U; Windows NT 6.1; rv:2.2) Gecko/20110201');
$str = curl_exec($curl);
curl_close($curl);

    und verwenden Sie dann Ihre code

        $html->load_file($str);
    $element=$html->find("table");

    Bearbeiten Hinzufügen User-agent zu emulieren, ein echter navigator (Dank ShiraNai7)

    • Dies führt auch dazu, , HTTP 403 Forbidden seit der User-Agent header fehlt noch in der Anfrage.
    • ist ja wohl der User-Agent einen großen Einfluss hier, ich recommand Sie den code so mutch , für meinen code, den ich nur geben, einen anderen Weg zu schreiben, die Lösung Dank für den Kommentar @ShiraNai7
    • Hinzufügen curl_setopt($curl, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows; U; Windows NT 6.1; rv:2.2) Gecko/20110201'); macht dieser code funktioniert auch 🙂
    InformationsquelleAutor Abderrahim Soubai Elidrissi
  3. 1

    versuchen Sie, ändern der user-agent mit nachstehenden Befehl - 

    ini_set("user_agent","Mozilla/5.0 (Windows NT 6.1; rv:8.0) Gecko/20100101 Firefox/8.0");

    es funktioniert dann!!!

    InformationsquelleAutor Sarang Kartikey
Schreibe einen Kommentar