Einloggen, um LinkedIn-mit python-requests-Sitzungen

Ich versuche ein log-in auf LinkedIn über die Python-requests:

import sys
import requests
from BeautifulSoup import BeautifulSoup


payload={
    'session-key' : '[email protected]',
    'session-password' : 'password'
}

URL='https://www.linkedin.com/uas/login-submit'
s=requests.session()
s.post(URL,data=payload)

r=s.get('http://www.linkedin.com/nhome')
soup = BeautifulSoup(r.text)
print soup.find('title')

Ich kann nicht scheinen, um sich mit dieser Methode. Ich habe sogar versucht das Spiel mit csrf-etc. in der Nutzlast, aber nicht die Sitzungen aufpassen sollen, dass für Sie?

Anmerkung zur letzten Zeile: ich habe den Titel verwenden, um zu überprüfen, ob ich erfolgreich eingeloggt. (Ich sollte "Willkommen! | LinkedIn", wenn ich angemeldet haben, stattdessen sehe ich "Weltweit Größte Berufliche Netzwerk | LinkedIn"

Bin ich etwas fehlt?

developer.linkedin.com/apis Nichts falsch mit der Verwendung Ihrer API?

InformationsquelleAutor mirri66 | 2013-09-20

  1. 19

    Modifizierte ich eine web-scraping-Vorlage, die ich für die meisten meiner Python-basiert kratzen muss zu Ihren Bedürfnissen passen. Überprüft, es funktionierte mit meinen eigenen login-info.

    Die Weise, die es funktioniert, ist durch nachahmen-ing browser und die Aufrechterhaltung eines cookieJar, in der Ihre Benutzer-Sitzung. Habe es auf Arbeit mit BeautifulSoup für Sie als gut.

    Hinweis: Dies ist ein Python2-version. Ich fügte hinzu, eine funktionierende Python ist3 Beispiel weiter unten auf Anfrage. 

    import cookielib
import os
import urllib
import urllib2
import re
import string
from BeautifulSoup import BeautifulSoup

username = "[email protected]"
password = "password"

cookie_filename = "parser.cookies.txt"

class LinkedInParser(object):

    def __init__(self, login, password):
        """ Start up... """
        self.login = login
        self.password = password

        # Simulate browser with cookies enabled
        self.cj = cookielib.MozillaCookieJar(cookie_filename)
        if os.access(cookie_filename, os.F_OK):
            self.cj.load()
        self.opener = urllib2.build_opener(
            urllib2.HTTPRedirectHandler(),
            urllib2.HTTPHandler(debuglevel=0),
            urllib2.HTTPSHandler(debuglevel=0),
            urllib2.HTTPCookieProcessor(self.cj)
        )
        self.opener.addheaders = [
            ('User-agent', ('Mozilla/4.0 (compatible; MSIE 6.0; '
                           'Windows NT 5.2; .NET CLR 1.1.4322)'))
        ]

        # Login
        self.loginPage()

        title = self.loadTitle()
        print title

        self.cj.save()


    def loadPage(self, url, data=None):
        """
        Utility function to load HTML from URLs for us with hack to continue despite 404
        """
        # We'll print the url in case of infinite loop
        # print "Loading URL: %s" % url
        try:
            if data is not None:
                response = self.opener.open(url, data)
            else:
                response = self.opener.open(url)
            return ''.join(response.readlines())
        except:
            # If URL doesn't load for ANY reason, try again...
            # Quick and dirty solution for 404 returns because of network problems
            # However, this could infinite loop if there's an actual problem
            return self.loadPage(url, data)

    def loginPage(self):
        """
        Handle login. This should populate our cookie jar.
        """
        html = self.loadPage("https://www.linkedin.com/")
        soup = BeautifulSoup(html)
        csrf = soup.find(id="loginCsrfParam-login")['value']

        login_data = urllib.urlencode({
            'session_key': self.login,
            'session_password': self.password,
            'loginCsrfParam': csrf,
        })

        html = self.loadPage("https://www.linkedin.com/uas/login-submit", login_data)
        return

    def loadTitle(self):
        html = self.loadPage("https://www.linkedin.com/feed/")
        soup = BeautifulSoup(html)
        return soup.find("title")

parser = LinkedInParser(username, password)

    Update 19. Juni 2014: Hinzugefügt parsing für CSRF-token von der homepage für den Einsatz in aktualisierter login-Prozess.

    Update 23. Juli 2015: Hinzufügen eines Python 3 Beispiel hier. Grundsätzlich erfordert die Substitution von Standorten und entfernen von veralteten Methoden. Es ist nicht perfekt formatiert oder irgendetwas, aber es funktioniert. Sorry für die rush-job. Am Ende sind die Prinzipien und Schritte sind identisch.

    import http.cookiejar as cookielib
import os
import urllib
import re
import string
from bs4 import BeautifulSoup

username = "[email protected]"
password = "password"

cookie_filename = "parser.cookies.txt"

class LinkedInParser(object):

    def __init__(self, login, password):
        """ Start up... """
        self.login = login
        self.password = password

        # Simulate browser with cookies enabled
        self.cj = cookielib.MozillaCookieJar(cookie_filename)
        if os.access(cookie_filename, os.F_OK):
            self.cj.load()
        self.opener = urllib.request.build_opener(
            urllib.request.HTTPRedirectHandler(),
            urllib.request.HTTPHandler(debuglevel=0),
            urllib.request.HTTPSHandler(debuglevel=0),
            urllib.request.HTTPCookieProcessor(self.cj)
        )
        self.opener.addheaders = [
            ('User-agent', ('Mozilla/4.0 (compatible; MSIE 6.0; '
                           'Windows NT 5.2; .NET CLR 1.1.4322)'))
        ]

        # Login
        self.loginPage()

        title = self.loadTitle()
        print(title)

        self.cj.save()


    def loadPage(self, url, data=None):
        """
        Utility function to load HTML from URLs for us with hack to continue despite 404
        """
        # We'll print the url in case of infinite loop
        # print "Loading URL: %s" % url
        try:
            if data is not None:
                response = self.opener.open(url, data)
            else:
                response = self.opener.open(url)
            return ''.join([str(l) for l in response.readlines()])
        except Exception as e:
            # If URL doesn't load for ANY reason, try again...
            # Quick and dirty solution for 404 returns because of network problems
            # However, this could infinite loop if there's an actual problem
            return self.loadPage(url, data)

    def loadSoup(self, url, data=None):
        """
        Combine loading of URL, HTML, and parsing with BeautifulSoup
        """
        html = self.loadPage(url, data)
        soup = BeautifulSoup(html, "html5lib")
        return soup

    def loginPage(self):
        """
        Handle login. This should populate our cookie jar.
        """
        soup = self.loadSoup("https://www.linkedin.com/")
        csrf = soup.find(id="loginCsrfParam-login")['value']
        login_data = urllib.parse.urlencode({
            'session_key': self.login,
            'session_password': self.password,
            'loginCsrfParam': csrf,
        }).encode('utf8')

        self.loadPage("https://www.linkedin.com/uas/login-submit", login_data)
        return

    def loadTitle(self):
        soup = self.loadSoup("https://www.linkedin.com/feed/")
        return soup.find("title")

parser = LinkedInParser(username, password)
    Ich bin ein bisschen spät zu der show hier, aber das ist nicht für mich arbeiten? Ich habe gerade meine E-Mail und Passwort nicht ändern, alles andere aber ich bin immer noch einfach nur wieder <title>World's Largest Professional Network | LinkedIn</title> - jemand in der Lage mir zu helfen?
    wo sehen Sie die Linien: title = self.loadTitle() und print title werden Sie wollen, fügen Sie Ihre eigenen code. Ist es, dass der Titel, der Druck ist nicht die, die Sie erwarten?
    Ja, ich bin noch immer der logged-out-homepage (Titel I eingefügt oben), statt das man, wenn jemand eingeloggt ist. Ich glaube nicht, dass der login wird durch den für mich?
    Ich habe das gleiche problem wie Cian. Ist es möglich, dass sich etwas verändert über die LinkedIn-Authentifizierung in den letzten Monaten?
    Aktualisiert code, um Platz für Veränderungen zu LinkedIn-login-Prozess, der erfordert nun ein CSRF-token.

    InformationsquelleAutor garromark

  2. 11

    Dies ist eine viel einfachere version. 

    import requests
from bs4 import BeautifulSoup

client = requests.Session()

HOMEPAGE_URL = 'https://www.linkedin.com'
LOGIN_URL = 'https://www.linkedin.com/uas/login-submit'

html = client.get(HOMEPAGE_URL).content
soup = BeautifulSoup(html, "html.parser")
csrf = soup.find(id="loginCsrfParam-login")['value']

login_information = {
    'session_key':'Login',
    'session_password':'Password',
    'loginCsrfParam': csrf,
}

client.post(LOGIN_URL, data=login_information)

client.get('Any_Linkedin_URL')
    es ist in der Tat einfach, Danke. Aber ich bin nicht in der Lage zu finden, wo du csrf = Suppe.find(id="loginCsrfParam-login")['Wert'] aus. Ich kann nicht finden, es in den Kopfzeilen der Anfrage beim Check in Chrome?
    Lassen Sie mich anders formulieren --- ich bin neugierig, warum brauchen wir diese -- csrf - = - Suppe.find(id="loginCsrfParam-login")['Wert'] aus. Ich kann nicht finden, es in den Kopfzeilen der Anfrage beim Check in Chrome?
    Dieser arbeitete für mich!
    print-Suppe.find(id="loginCsrfParam-login")['Wert'] TypeError: 'NoneType' - Objekt hat kein Attribut 'getitem' Nicht in der Lage zu bekommen csrf-Wert. Können Sie mir helfen?

    InformationsquelleAutor Morgan Allen

  3. 1

    Den OP ' s Lösung hat bei mir mit nur eine sehr leichte änderung.

    Ändern "session-key" zu "session_key" und ändern Sie "session-Passwort", um session_password.'

    Andere als das, der code ist gut so, wie es steht.

    InformationsquelleAutor Scott N

Schreibe einen Kommentar