Erhalte die Seite mit Javascript in Python generiert

Ich würde gerne download-web-Seite erzeugt, indem Javascript und speichern Sie es auf string-variable in Python code. Die Seite wird generiert, wenn Sie auf den button klicken.

Wenn ich wissen würde, die resultierende URL, die ich benutzen würde urllib2 aber dies ist nicht der Fall.

danke

Kommentar zu dem Problem - Öffnen
Ist dieser generiert, die komplett in js oder einfach nur gebaut aus einem ajax-call ? Kommentarautor: e-satis
@e-satis denke ich, dass es komplett in js Kommentarautor: xralf
Dann würde ich mich mit J. F Lösung, oder mit python-webkit. Nur denken Sie daran, Sie benötigen ein display-server ausgeführt werden, so dass, wenn Sie planen, es auf einem headless-server, müssen Sie hack ein wenig. Kommentarautor: e-satis

InformationsquelleAutor der Frage xralf | 2012-01-22

  1. 34

    Könnten Sie Selenium Webdriver:

    #!/usr/bin/env python
from contextlib import closing
from selenium.webdriver import Firefox # pip install selenium
from selenium.webdriver.support.ui import WebDriverWait

# use firefox to get page with javascript generated content
with closing(Firefox()) as browser:
     browser.get(url)
     button = browser.find_element_by_name('button')
     button.click()
     # wait for the page to load
     WebDriverWait(browser, timeout=10).until(
         lambda x: x.find_element_by_id('someId_that_must_be_on_new_page'))
     # store it to string variable
     page_source = browser.page_source
print(page_source)

    InformationsquelleAutor der Antwort jfs

Schreibe einen Kommentar