Ist das web scraping erlaubt?

Arbeite ich an einem Projekt, das erfordert, dass bestimmte Statistiken auf einer anderen website, und ich ' ve erstellt eine HTML-scraper, die Daten erhält alle 15 Minuten automatisch. Allerdings habe ich aufgehört den bot jetzt, als in Ihren Nutzungsbedingungen, die Sie erwähnen, Sie erlauben es nicht.

Ich wirklich wollen, dies respektieren, und vor allem, wenn es ein Gesetz verbietet, mich von diesen Daten, aber ich habe die Kontaktaufnahme mit Ihnen per E-Mail mehrere Male ohne eine einzige Antwort, so jetzt hab ich zu dem Schluss gekommen, dass ich Sie einfach schnappen Sie sich die Daten, wenn es legal ist.

Auf bestimmte Foren habe ich gelesen, dass es legal IST, aber ich würde viel lieber eine "präzise" Antwort, die hier auf StackOverflow.

Und lassen Sie uns sagen, dass dies in der Tat nicht illegal, dann hätten Sie keine software zu erkennen meinen bot mehrere verbindungen alle 15 Minuten?

Auch, wenn man über die, die Ihre Daten, wir reden über eine einzige Nummer für jedes "team", und diese Zahl werde ich die übertragung in unsere eigene Nummer.

Ich werde die Abstimmung zu schließen, ist diese Frage off-topic, weil es Fragen zur Rechtmäßigkeit von screenscraping. Dies hängt von vielen Faktoren ab, dass kann nicht sinnvoll zu beantworten hier.
die Antwort ist "es hängt"
verschiedene Jurisdiktionen haben verschiedene Gesetze.
stellen Sie sich ein Dialogfeld, in: Webmaster: "ich sage, Crawl-delay: 5 > robots.txt". Bot: "Okay... not more than once in 5 minute...". Webmaster: "Nein! Schlecht! Bad robot! Geh Weg!"... Ist es das, was du meintest? LOL xD
rechtliche Fragen sind off-topic für die so gefasste Natur. ich würde einen Rechtsanwalt konsultieren.

InformationsquelleAutor Mikkel | 2015-09-06

  1. 33

    Ich zitiere Pablo Hoffman (Scrapinghub co-Gründer) Antwort auf die Frage "Was ist die Rechtmäßigkeit von web-scraping?", Ich habe auf der anderen Seite:

    First things First: ich bin kein Jurist und diese Kommentare sind ausschließlich
    basierend auf meiner Erfahrung in der Arbeit an Scrapinghub, suchen Sie bitte die rechtlichen
    Unterstützung entsprechend.

    Hier sind ein paar Dinge zu berücksichtigen, wenn die Schaben öffentlichen Daten von websites (beachten Sie, dass die folgenden Adressen nur US-Recht):

    • Solange Sie nicht krabbeln an eine disruptive rate, Schaber nicht gegen einen Vertrag (in form von Nutzungsbedingungen) oder ein Verbrechen zu Begehen
      (wie definiert in den Computer Fraud and Abuse Act).
    • Website ' s user agreement ist nicht einklagbar als browsewrap Vereinbarung, da die Unternehmen keine ausreichende Mitteilung der
      Bezug auf Website-Besucher.
    • Schaber greift auf Daten dieser website als Besucher,
      und durch folgende Pfade ähnlich wie eine Suchmaschine. Diese kann getan werden
      ohne Registrierung als Nutzer (und ausdrücklich akzeptieren alle Bedingungen).
    • In Nguyen v. Barnes & Noble, Inc. die Gerichte regiert , platzieren einfach einen
      link zu Nutzungsbedingungen unten auf der Webseite ist nicht ausreichend
      "Anlass für Konstruktive Hinweise." In anderen Worten, es ist nichts
      auf einer öffentlichen Seite, das würde bedeuten, dass lediglich der Zugriff auf die
      Informationen ist vorbehaltlich vertraglicher Bedingungen. Schaber gibt
      weder explizite noch implizite Zustimmung zu einer Vereinbarung, daher
      Verstöße gegen keinen Vertrag.
    • Soziale Netzwerke, zum Beispiel, weisen Sie den Wert zu einem Benutzer (basierend auf call-to-action auf der öffentlichen Seite), als die Fähigkeit,: i) Zugriff auf die vollständigen profile, ii) die Ermittlung gemeinsamer Freunde/verbindungen, iii) eingeführt zu werden, um andere, und iv) Kontakt Mitglieder direkt. Solange Schaber macht keinen Versuch, eine dieser Aktionen, die Sie nicht gewinnen "unberechtigten Zugang" zu Ihren Diensten und damit nicht gegen CFAA
    • Eine Gründliche Bewertung der Rechtsfragen, die hier gesehen werden kann: http://www.bna.com/legal-issues-raised-by-the-use-of-web-crawling-and-scraping-tools-for-analytics-purposes
    Dies ist die nächste ich denke, dass ich auf eine Antwort, also werde ich markieren Sie diese als Antwort. Danke!!!

    InformationsquelleAutor Andrés Pérez-Albela H.

  2. 2

    Muss es robots.txt - Datei im root-Ordner der Website.

    Gibt es Pfade, die forbidden zu belästigen mit scrappers, und diejenigen, die allowed (mit akzeptablen timeouts angegeben).

    Wenn diese Datei nicht existiert, alles ist erlaubt, und Sie übernehmen keine Verantwortung für die website-Eigentümer nicht zur Verfügung, info.

    Auch, hier finden Sie einige Erklärungen zum robots exclusion standard.

    Hit and run? Nette Ideologie...
    Nur, wenn Sie nicht tragen ein Zeichen, das sagt "please don' T hit me".
    Obwohl es ethisch zu Lesen robots.txt und kriechen nur erlaubt, Seiten, die rechtlich nicht durchgesetzt

    InformationsquelleAutor ankhzet

Schreibe einen Kommentar