Als «airflow» getaggte Fragen

16
Luftstrom: Wie lösche ich eine DAG?
Ich habe den Airflow-Webserver gestartet und einige Dags geplant. Ich kann die Dags auf der Web-GUI sehen. Wie kann ich eine bestimmte DAG aus der Ausführung löschen und in der Web-GUI anzeigen? Gibt es dafür einen Airflow CLI-Befehl? Ich habe mich umgesehen, konnte aber keine Antwort auf eine einfache Möglichkeit …
73 airflow 
2
Apache-Luftstrom kann nach Neuinstallation nicht ausgeführt werden, Python-Importfehler
Nach einer Neuinstallation mit pip install apache-airflowwerden alle Versuche, den Luftstrom auszuführen, mit einem Python-Importfehler beendet: Traceback (most recent call last): File "/Users/\*/env/bin/airflow", line 26, in <module> from airflow.bin.cli import CLIFactory File "/Users/\*/env/lib/python3.7/site-packages/airflow/bin/cli.py", line 70, in <module> from airflow.www.app import (cached_app, create_app) File "/Users/\*/env/lib/python3.7/site-packages/airflow/www/app.py", line 26, in <module> from flask_wtf.csrf …
2
Das Starten des Airflow-Webservers schlägt mit sqlalchemy.exc.NoInspection fehl. Verfügbar: Es ist kein Inspektionssystem verfügbar
Installation ordnungsgemäß durchgeführt. db wurde ordnungsgemäß gestartet und beim Versuch, den Webserver zu starten, wird der folgende Fehler angezeigt. Ich habe alles neu installiert, aber es funktioniert immer noch nicht. Ich werde es begrüßen, wenn mir jemand hilft. Konsolenausgabe: $:~/airflow# airflow webserver -p 8080 ____________ _____________ ____ |__( )_________ __/__ …
16 airflow 
1
Fehler beim Installieren von Apache-Airflow [geschlossen]
Geschlossen. Diese Frage ist nicht reproduzierbar oder wurde durch Tippfehler verursacht . Derzeit werden keine Antworten akzeptiert. Möchten Sie diese Frage verbessern? Aktualisieren Sie die Frage so dass es beim Thema für Stack - Überlauf. Geschlossen vor 3 Monaten . Ich erhalte den obigen Fehler, wenn ich Airflow-Version und Airflow …
12 python  airflow 
1
Der Airflow Scheduler kann nicht mit kubernetes executor gestartet werden
Ich verwende https://github.com/helm/charts/tree/master/stable/airflow Helmdiagramm und erstelle ein puckle/docker-airflowImage der Version 1.10.8 mit darauf installierten Kubernetes und verwende dieses Bild im Helmdiagramm File "/usr/local/bin/airflow", line 37, in <module> args.func(args) File "/usr/local/lib/python3.7/site-packages/airflow/bin/cli.py", line 1140, in initdb db.initdb(settings.RBAC) File "/usr/local/lib/python3.7/site-packages/airflow/utils/db.py", line 332, in initdb dagbag = models.DagBag() File "/usr/local/lib/python3.7/site-packages/airflow/models/dagbag.py", line 95, in __init__ …
1
Es wird versucht, dynamische Unter-Tags aus dem übergeordneten Tag basierend auf einem Array von Dateinamen zu erstellen
Ich versuche, s3-Dateien mithilfe des Luftstroms aus einem "nicht löschenden" Bucket (dh ich kann die Dateien nicht löschen) in GCS zu verschieben. Ich kann nicht garantieren, dass jeden Tag neue Dateien vorhanden sind, aber ich muss jeden Tag nach neuen Dateien suchen. Mein Problem ist die dynamische Erstellung von Subtags. …
1
Wie kann eine Airflow-Task nur ausgelöst werden, wenn neue Partitionen / Daten mit DAG in Python in der AWS-Athena-Tabelle verfügbar sind?
Ich habe ein Szenario wie das folgende: Lösen Sie a Task 1und Task 2nur aus, wenn neue Daten für sie in der Quelltabelle (Athena) verfügbar sind. Der Auslöser für Task1 und Task2 sollte bei einer neuen Datenparition an einem Tag erfolgen. Trigger Task 3erst nach Abschluss von Task 1undTask 2 …
Durch die Nutzung unserer Website bestätigen Sie, dass Sie unsere Cookie-Richtlinie und Datenschutzrichtlinie gelesen und verstanden haben.
Licensed under cc by-sa 3.0 with attribution required.