Wie laufen Luftstrom auf Windows

Den üblichen Anweisungen für die Ausführung des Luftstrom nicht anwenden auf eine Windows-Umgebung:

# airflow needs a home, ~/airflow is the default,
# but you can lay foundation somewhere else if you prefer
# (optional)
export AIRFLOW_HOME=~/airflow

# install from pypi using pip
pip install airflow

# initialize the database
airflow initdb

# start the web server, default port is 8080
airflow webserver -p 8080

Den Luftstrom Dienstprogramm ist nicht verfügbar in der Kommandozeile und ich kann es nicht finden anderswo manuell Hinzugefügt werden.
Wie kann der Luftstrom auf Windows laufen?

InformationsquelleAutor Rafael | 2015-09-03
  1. 2

    Können Sie aktivieren bash im Fenster und Folgen Sie der Anleitung, wie Sie ist.
    Ich war in der Lage, aufzustehen und zu laufen erfolgreich nach oben.

    Sobald Sie fertig sind die Installation, Bearbeiten airflow.cfg zu zeigen Sie alle Ihre Konfigurationen, um irgendwo in Ihr windows-system eher als lxss (ubuntu), da gibt es bugs rund um ubuntu nicht angezeigt-Dateien geschrieben, die von windows-system.

    • Hi Ayush, ist dies nicht mehr funktioniert in den aktuellen Versionen des Luftstroms. Es schlägt immer fehl mit ModuleNotFoundError: No module named 'pwd', das ist ein Modul nicht verfügbar für Windows aus technischen Gründen.
    InformationsquelleAutor Ayush K Singh
  2. 15

    Drei Grundlegende Optionen

    Ging ich durch ein paar Iterationen dieses Problems und dokumentiert Sie, als ich entlang ging. Die drei Dinge, die ich versuchte waren:

    1. Installieren Sie den Luftstrom direkt in Windows 10 - Dieser Versuch ist fehlgeschlagen.
    2. Installieren Sie den Luftstrom in Windows 10 WSL mit Ubuntu - Dies hat Super funktioniert. Beachten Sie, dass die WSL Windows-Subsystem für Linux, die Sie bekommen können kostenlos im Windows store.
    3. Installieren Sie den Luftstrom in Windows 10 über das Andockfenster + Centos - Das funktionierte auch Super.

    Beachten Sie, dass wenn Sie wollen zu bekommen, es läuft wie ein Linux-Dienst, ist es nicht möglich für option Nummer 2. Es ist möglich für option Nummer 3, aber ich Tat es nicht, da es erfordert die Aktivierung privilegierten Containern im docker (was ich wan nicht bewusst, als ich angefangen habe). Auch das ausführen eines Dienstes in Docker ist eine Art gegen-Paradigma als jeder Behälter sollte ein einzelner Prozess/Einheit Verantwortung sowieso.

    Detaillierte Beschreibung #2 - WSL-Option

    Wenn Sie gong für option 2, aber die grundlegenden Schritte sind:

    • Bekommen WSL Ubuntu installiert und geöffnet.
    • Überprüfen, es kommt mit python 3.6.5 oder so ("Python ist3 -version").
    • Vorausgesetzt, es immer noch tut, fügen Sie diese Pakete, so dass die Installation von PIP wird wor.
      • sudo apt-get install software-properties-common
      • sudo apt-add-repository-Universum
      • sudo apt-get update
    • Installieren pip mit:
      • sudo apt-get install python-pip
    • Führen Sie die folgenden 2 Befehle zu installieren Luftstrom:
      • export SLUGIFY_USES_TEXT_UNIDECODE=ja
      • pip install apache-Luftstrom
    • Öffnen Sie ein neues terminal (ich war auch überrascht, aber dies schien erforderlich zu sein).
    • Init den Luftstrom DB:
      • Luftstrom initdb

    Danach, Sie sollten gut zu gehen! Der blog hat mehr Details auf vielen dieser Schritte und grobe Zeitpläne für wie lange einstellen bis die WSL nimmt, etc - also, wenn Sie haben eine harte Zeit Tauchen dort einige mehr.

    • Hallo John, Sie können arbeiten, um die C++ - Kompilierung Probleme, Sie kämpften an der installation direkt unter Windows, durch das herunterladen vorbereitet Räder für diese Abhängigkeiten, cf. lfd.uci.edu/~gohlke/pythonlibs, und dann pip install <Rad-Datei>
    • Dank haben die guten Informationen! Ich hatte den Verdacht es würde eventuell funktionieren, ich habe einfach nur den Willen verloren zu stoßen und am Ende (da werde ich unter Linux in der Art jedenfalls). Ich bin froh, dass du eine wirkliche Lösung für die Menschen, obwohl; ich werde versuchen, daran zu erinnern, link zu meinem blog zu diesem Kommentar, damit die Leute es finden :).
    • Hallo Johannes, leider kann man zwar die Arbeit rund um die Zusammenstellung Fragen, es gibt ein Python Paket fehlt unter Windows (nativ, cygwin und WSL1), die letztlich verursacht meine Bemühungen zu scheitern (vgl. mein Kommentar zu der Antwort von @Ayush K Singh). Ich bin nun gespannt auf Windows 10 ist WSL2 sollte - in der Theorie, da basierend auf einem Echtzeit - Linux-kernel- in der Lage sein zu kompilieren, die pwd Paket.
    InformationsquelleAutor John Humphreys - w00te
  3. 11

    Anstelle der Installation Luftstrom über pip, laden Sie die zip auf die Airflow-Projekt GitHub, entpacken und in den Ordner ausführen python setup.py install auf der Kommandozeile. ERROR - 'module' object has no attribute 'SIGALRM' Fehler passieren, aber so weit dies hatte keine Auswirkungen auf die Luftzirkulation Funktionen.

    Diese Methode zu verwenden, die den Luftstrom util wird nicht als ein Befehl.
    Als workaround hilft es, die [current folder]\build\scripts-2.7\airflow - Datei, die das python-Skript für den Luftstrom util.

    Andere Lösung ist zum Anhängen an die System-variable PATH einen link zu einer batch-Datei, die ausgeführt wird Luftstrom (airflow.bat):

    python C:\path\to\airflow %*

    Ab diesem Punkt, dem tutorial gefolgt werden kann der Regel:

    airflow init
airflow webserver -p 8080

    Habe ich noch nicht getestet, wie gut oder wenn der Luftstrom die DAGs die unter Windows laufen.

    • Das funktioniert nicht mehr wegen fehlenden Modul "pwd" ist nur für UNIX-Systeme. Verwiesen wird indirekt durch airflow\bin\cli.py", line 16 und direkt per daemon\daemon.py", line 25
    InformationsquelleAutor Rafael
  4. 6

    Leider, die Antwort auf diese scheint zu sein, "No", wie der Dec-2015 - siehe https://github.com/airbnb/airflow/issues/709. Dies ist wegen des Umzugs in gunicorn. gunicorn kann die windows-Unterstützung in R18.

    InformationsquelleAutor Samir Seth
  5. 1

    Kann man es mit Cygwin. Cygwin ist eine Kommandozeilen-shell, die läuft auf Windows und Linux emuliert. So werden Sie in der Lage, die Befehle ausführen,

    # airflow needs a home, ~/airflow is the default,
# but you can lay foundation somewhere else if you prefer
# (optional)
export AIRFLOW_HOME=~/airflow

# install from pypi using pip
pip install apache-airflow

# initialize the database
airflow initdb

# start the web server, default port is 8080
airflow webserver -p 8080

    Hinweis 1: Wenn Sie Cygwin auf Ihrem Unternehmen gelieferten computer, die Sie möglicherweise ausführen müssen, um die Cygwin-Anwendung als administrator. Sie können dies tun, mit das folgende tutorial von Microsoft.

    Hinweis 2: Wenn Sie wie ich sind Sie hinter einem proxy (bei der Arbeit oder was auch immer-proxy, die Sie hinter sind) müssen Sie zwei Umwelt-Variablen für pip-arbeiten auf der Kommandozeile; in diesem Fall Cygwin. Sie können Folgen Sie diese StackOverflow-Antwort für mehr details. So habe ich mich auf die zwei folgenden Umgebungsvariablen auf meinem Windows-Rechner,

    // Note this first entry has an S in HTTPS and the other entry is just regular HTTP. Don't forget that distinction in the key name and in the url of the value.
HTTPS_PROXY=https://myUsernameGoesHere:myPasswordGoesHere@yourProxyHostNameGoesHere:yourProxyPortNumberGoesHere

HTTP_PROXY=http://myUsernameGoesHere:myPasswordGoesHere@yourProxyHostNameGoesHere:yourProxyPortNumberGoesHere

    Funktioniert nicht Mehr: Anscheinend alle der oben genannten Arbeit umsonst war, weil Luftstrom funktioniert nicht auf Windows. Sehen Sie sich bitte die StackOverflow-post. Die oben genannten Schritte können Sie nutzen, Pip wenn.

    Alternativ, und ich weiß, dies kann oder kann nicht gesehen werden als die unter Windows laufen, können Sie installieren eine virtuelle Maschine client wie Oracle Virtualbox oder VMware Workstation und dann setup, was Linux-version, die Sie wollen, wie Ubuntu-Desktop und dann kann man auch Linux laufen normal. Wenn Sie mehr detaillierte Anweisungen hierzu können Sie dieses AskUbuntu vom Stapel Exchange-community beantworten hier.

    Alternativ (2), Sie könnte erstellen Sie ein AWS-Konto, dann setup einen einfachen ec2-Instanz mit Linux, dann ssh in das ec2-Instanz, und dann führen alle Ihre Befehle zu Ihrem Herzen Inhalt. AWS bietet eine Kostenlose tier, so dass Sie sollten in der Lage sein, um es kostenlos tun. Plus, AWS ist sehr gut dokumentiert, also sollte es nicht allzu schwer sein, um eine einfache Linux-server zum laufen; ich Schätze, ein Anfänger könnte man es in etwa einer Stunde.

    InformationsquelleAutor Kyle Bridenstine
Schreibe einen Kommentar