Laden Sie alle Dateien eines bestimmten Typs aus einer Webseite mit wget

Folgendes hat nicht funktioniert. Ich weiß nicht, warum es nur halt in die Start-url, gehen Sie nicht in die links, um die Suche für die angegebene Datei-Typ.

wget -r -Ein .pdf home_page_url

Andere Weise rekursiv herunterladen alle pdf-Dateien in eine website. ?

InformationsquelleAutor Neil | 2013-08-16
  1. 1

    Kann es werden, basierend auf einem robots.txt. Versuchen Sie -e robots=off.

    Andere mögliche Probleme sind cookie-basierte Authentifizierung, agent oder Ablehnung für wget.
    Finden Sie diese Beispiele.

    EDIT: Der Punkt in ".pdf" ist falsch, nach sunsite.univie.ac.bei

    • Versucht, aber Gleiches Ergebnis. Es ist nicht ein cookie-basierten website für sicher. Ich könnte download mit python das urllib öffnen rekursiv.Kann sein, das Protokoll wird Ihnen helfen. Es ist im Grunde downloads home page sagt, Löschen < - homepage-url - > da sollte Sie abgelehnt werden. Trifft dann auf eine Seite, die kein Impressum hat und stopes es. Was ist mit den anderen links, in der Hoffnung Magier ?
    • Probiert, was? Entfernen der dot? Ignoriert die robots.txt? Oder simuliert einen browser? Oder allen von Ihnen?
    • Entfernen versucht dot ignorieren und Roboter
    • Vielleicht mal das browser. http://www.askapache.com/linux/wget-header-trick.html
    • Dieser user hatte ein ähnliches problem, und es scheint, dass er es gelöst.
    • Für jeden kommen über diese Antwort über Suchmaschinen, beachten Sie bitte, dass die Verwendung von '-Ein .ext' und '-A ext' sind genau die gleichen. Die Dokumentation OP Punkte zu zeigt ein Beispiel für beide Fälle, und nicht ausdrücklich etwas über die '.'.

    InformationsquelleAutor rimrul
  2. 1

    folgende cmd funktioniert bei mir, es wird laden Sie Bilder von einer Website

    wget -A pdf,jpg,png -m -p -E -k -K -np http://site/path/
    InformationsquelleAutor telehan
Schreibe einen Kommentar