Apache Airflow Vor- und Nachteile

Apache proxy was most useful for me as I could connect different servers easily. Bewertung gesammelt von und auf G2.com gehostet.

Nothing as such I have found out at this moment. Bewertung gesammelt von und auf G2.com gehostet.

Apache Airflow ist eine Freeware, die Komponenten ausführt, die in Python-Modulen geschrieben sind. Die geschriebenen Python-Module werden DAGs genannt. Die DAGs müssen mit geeigneten Verbindungen für eine erfolgreiche Ausführung konfiguriert werden. Die Verbindungen und Variablen sind leicht konfigurierbar. Der Aspekt der Benutzeroberfläche des Tools macht die Visualisierung zum attraktivsten Aspekt des Tools. Das Auslösen der jeweiligen DAGs, der Ausführungsstatus, Erfolgs- und Fehlschlagbenachrichtigungen in grünen und roten Farben usw. sind einige der besten Aspekte von Apache Airflow. Die Konfiguration von Variablen in Form von JSON-Dateien ist einfach und unkompliziert. Die verschiedenen Instanzen von Ausführungen zusammen mit den individuellen DAG-Status ermöglichen es den Benutzern, die Protokolle historisch erfolgreich zu verfolgen. Die Fähigkeit, die Protokolle für all diese Instanzen zurückzuverfolgen, macht dieses Tool zu einem lobenswerten. Die funktionsbasierte Kategorisierung der Funktionalität ist flexibel. Bewertung gesammelt von und auf G2.com gehostet.

Apache Airflow enthält eine umfangreiche Dokumentation, die gelesen und überprüft werden muss, um sicherzustellen, dass die Konfiguration Ihren Anforderungen entspricht. Kenntnisse in Python sind als Voraussetzung erforderlich. Vertrautheit mit Json-Dateien und -Format ist bis zu einem gewissen Grad erforderlich. Das Tool könnte bei vielen Benutzern, die keinen Hintergrund in Python haben, den Eindruck erwecken, etwas komplex zu sein. Die Formatierung von Aufgaben, Hooks usw. könnte etwas komplex sein. Es sind nicht viele Beispiele in offenen Foren verfügbar, und die Erkundung der Lösung für eine End-to-End-Funktionalität könnte für neue Benutzer etwas herausfordernd sein. Bewertung gesammelt von und auf G2.com gehostet.

Different types of Operators and Trigger rules. Bewertung gesammelt von und auf G2.com gehostet.

Nothing as such but Web UI can be improved Bewertung gesammelt von und auf G2.com gehostet.

Once you know the strengths of Ariflow create data pipelines is easier than ever before, the data lineage now is super clear since Airflow has a lot of visual integrations Bewertung gesammelt von und auf G2.com gehostet.

UI has lots of bug still, some times the UI will show bad or elements will appear in weird places and it would become impossible to click what you need, It happens often enough that it bothers Bewertung gesammelt von und auf G2.com gehostet.

You can orchestrate many DAGs at once at different schedules and can easily go back in time to reproduce/replicate runs. Bewertung gesammelt von und auf G2.com gehostet.

The Airflow CLI is not as friendly as the Airflow UI. The documentation is sometimes not clear/misses details. Bewertung gesammelt von und auf G2.com gehostet.

Airflow is easy to get started with and can scale and do more things as your tech stack evolves. Airflow comes with a lot of helpful features out-of-the-box, such as the DAG visualizations and task trees. Furthermore, Airflow is very flexible. You can use it for more than just data transformation. We started running batch ML models in Airflow before we onboarded a third-party tool. Bewertung gesammelt von und auf G2.com gehostet.

There is nothing I dislike about Airflow. We started using it less because it requires more engineering support than other tools (that probably run on Airflow), but we will continue to use it because it is the most flexible tool for ETL. We wished that Airflow had a premium tier so that we could get more support. Bewertung gesammelt von und auf G2.com gehostet.

Es wird Aufgaben der Reihe nach ausführen, jede Aufgabe wird die erforderlichen Ressourcen haben. Bewertung gesammelt von und auf G2.com gehostet.

Es wird keine Versionierung für Datenpipelines geben. Mangel an Datenaustausch zwischen Aufgaben. Bewertung gesammelt von und auf G2.com gehostet.

The tree view of your ETLs is a great way to visualize how well the DAG is functioning, if it ran when it was supposed to, and the order and dependency of tasks. Bewertung gesammelt von und auf G2.com gehostet.

Error messages are difficult to parse, and the navigation isn't intuitive. Bewertung gesammelt von und auf G2.com gehostet.

Reruns and backfills are super easy, flow chart for jobs is very intuitive, and it's all done in python! Bewertung gesammelt von und auf G2.com gehostet.

Clunky at times. Spinning up a new instance is difficult if you don't know terraform and can reuse the canned manifest/helm Bewertung gesammelt von und auf G2.com gehostet.