Avis et détails du produit Apache Airflow

Ce que j'aime le plus chez Airflow, c'est sa flexibilité et le nombre de fonctionnalités pour construire des flux de travail en utilisant des DAGs. Il est très utile pour gérer des pipelines complexes avec des dépendances. L'intégration avec différents systèmes est également solide. Une fois l'installation terminée, il fonctionne de manière fiable et est utilisé fréquemment dans les opérations quotidiennes. Avis collecté par et hébergé sur G2.com.

La facilité d'utilisation est un domaine où il peut s'améliorer, surtout pour les nouveaux utilisateurs. La configuration initiale et la mise en œuvre demandent des efforts si vous le gérez vous-même. L'interface utilisateur n'est pas très conviviale et parfois lente. De plus, le débogage des workflows échoués peut prendre du temps. Avis collecté par et hébergé sur G2.com.

Ce que j'aime le plus chez Apache Airflow, c'est la façon dont il rend la gestion des flux de travail organisée et prévisible. Vous pouvez clairement définir des tâches, établir des dépendances et voir tout disposé en un seul endroit, ce qui rend les pipelines complexes beaucoup plus faciles à comprendre.

J'aime aussi sa flexibilité. Vous pouvez construire et personnaliser des flux de travail pour s'adapter à presque n'importe quel pipeline de données, et la planification fonctionne simplement une fois qu'elle est configurée. L'interface utilisateur est un autre grand avantage, elle permet de surveiller facilement les exécutions, de déboguer les problèmes et de voir rapidement où quelque chose a échoué sans fouiller dans les journaux pendant des heures. Avis collecté par et hébergé sur G2.com.

Une chose que je n'aime pas à propos d'Apache Airflow, c'est qu'il peut sembler assez lourd et complexe, surtout au début. Le configurer correctement prend du temps, et il y a pas mal d'éléments à comprendre avant que tout ne fonctionne sans problème.

Le débogage peut également être frustrant parfois. Lorsqu'une erreur se produit, les journaux ne sont pas toujours les plus faciles à suivre, donc cela peut prendre plus de temps que prévu pour comprendre ce qui s'est mal passé. Cela peut aussi être un peu gourmand en ressources, ce qui n'est pas idéal si vous gérez des projets plus petits ou si vous avez juste besoin de quelque chose de léger. Avis collecté par et hébergé sur G2.com.

Pour moi, la fonctionnalité qui se démarque est définitivement l'interface Web. En tant qu'ingénieur de données, je me retrouve souvent à résoudre des problèmes, et la vue en grille dans Airflow rend remarquablement simple l'identification exacte de l'endroit où un pipeline a échoué. Je peux rapidement accéder aux journaux pour n'importe quelle tâche spécifique et déterminer ce qui a mal tourné en quelques secondes. Ce niveau de transparence est quelque chose que les tâches cron traditionnelles ou les scripts de base n'offrent tout simplement pas. Avoir un tableau de bord central pour tous vos flux de travail procure vraiment une tranquillité d'esprit. Avis collecté par et hébergé sur G2.com.

Le principal défi est la facilité de mise en œuvre pour les débutants. Mettre en place l'infrastructure (comme le serveur web, le planificateur et la base de données) nécessite une bonne dose de connaissances en DevOps, ce qui peut être un obstacle pour une petite équipe.

Étant donné qu'il est open-source, vous n'avez pas de support client traditionnel, vous dépendez donc fortement de la communauté. Bien que la communauté soit active, la documentation peut parfois être un peu écrasante lorsque vous essayez de résoudre un problème de configuration très spécifique. C'est un outil puissant, mais la facilité d'utilisation du point de vue de l'installation pourrait certainement être améliorée. Avis collecté par et hébergé sur G2.com.

J'adore utiliser Apache Airflow pour créer des pipelines ETL, surtout avec sa visualisation DAG pilotée par l'interface utilisateur qui rend la compréhension du flux de travail et des dépendances beaucoup plus facile. La vue graphique et par étapes est incroyable, et l'identification des erreurs est simple. La fonctionnalité de surveillance des tâches est vraiment utile, me permettant de voir quels travaux sont en cours, et la gestion des réessais et des échecs est essentielle pour des opérations fluides. L'installation a été simple, en particulier sur AWS, et c'est incroyablement utile lorsqu'il est intégré avec Acceldata pour l'observabilité des pipelines. Avis collecté par et hébergé sur G2.com.

La seule chose que j'ai remarquée, quand il y a plus de DAGs, c'est que l'interface utilisateur peut parfois sembler lente lorsqu'il s'agit de gérer de nombreuses tâches. Avis collecté par et hébergé sur G2.com.

l'ensemble du processus est très extensible, car il y a tellement d'utilisateurs, nous avons beaucoup d'opérateurs/plugins intégrés. L'interface utilisateur est très propre et intuitive. Avis collecté par et hébergé sur G2.com.

Je ne pense pas qu'il y ait une fonctionnalité où nous pouvons regarder les journaux de tous les travaux en un seul endroit. Disons que nous avons 20-30 étapes, donc nous devons aller à chaque étape et vérifier les journaux. Je voudrais donc que tous les journaux soient consolidés. Avis collecté par et hébergé sur G2.com.

J'aime les DAGs clairs d'Apache Airflow car ils rendent les flux de travail faciles à comprendre et à maintenir. La fonctionnalité de planification garantit que les pipelines s'exécutent automatiquement sans effort manuel, ce qui est vraiment utile. J'apprécie également les tentatives de réexécution et la surveillance, car elles aident à détecter et à récupérer rapidement des échecs. De plus, sa scalabilité est un avantage significatif, me permettant de gérer de manière fiable des charges de travail de données croissantes, rendant Airflow fiable pour les pipelines de production. Dans l'ensemble, ces fonctionnalités améliorent vraiment mon expérience avec Apache Airflow. Avis collecté par et hébergé sur G2.com.

Certaines choses dans Apache Airflow ne fonctionnent pas très bien pour moi. L'installation et la configuration initiale sont un peu complexes et prennent du temps. L'interface utilisateur semble parfois lente lorsque beaucoup de DAGs sont en cours d'exécution. Déboguer les tâches échouées n'est pas toujours clair, les journaux sont dispersés. De plus, les mises à niveau de version peuvent casser les DAGs existants, la compatibilité rétroactive devrait être meilleure. Avis collecté par et hébergé sur G2.com.

Apache Airflow rend incroyablement facile la conception, la planification et la surveillance de flux de travail complexes en utilisant Python. J'aime la façon dont il permet de construire des DAGs de manière très lisible et modulaire, ce qui aide à gérer des pipelines de données à grande échelle. L'interface utilisateur est intuitive et offre une visibilité complète sur l'exécution des tâches, les réessais et les journaux. Sa capacité à s'intégrer parfaitement avec les bases de données, les fournisseurs de cloud et les services externes le rend très flexible pour des cas d'utilisation réels. Le support de la communauté et les plugins disponibles facilitent également l'extension des fonctionnalités selon les besoins. Le support client est également bon. Avis collecté par et hébergé sur G2.com.

Airflow peut être un peu difficile à installer et à configurer au départ, surtout lors du déploiement en production avec plusieurs travailleurs et planificateurs. La gestion des ressources et la mise à l'échelle nécessitent parfois des ajustements supplémentaires, et le débogage peut être compliqué pour les nouveaux utilisateurs. La courbe d'apprentissage est plus raide par rapport à certains autres outils d'orchestration, et l'interface utilisateur, bien que utile, pourrait être plus moderne et réactive. Cependant, une fois configuré, il devient stable et très fiable. Avis collecté par et hébergé sur G2.com.

J'utilise Apache Airflow pour la gestion et la surveillance des flux de projet. Je trouve que son interface utilisateur basée sur le web et ses fonctionnalités de script en Python sont précieuses, ce qui facilite le développement et la conception des flux de processus. Python, en tant que langage de script, est plus convivial que d'autres langages complexes, ce qui aide à écrire des organigrammes complexes mieux qu'avec des langages traditionnels. Avis collecté par et hébergé sur G2.com.

Le processus d'installation d'Apache Airflow est assez complexe et fortement dépendant de PIP, ce qui le rend très difficile à gérer sur des serveurs bloqués par la cybersécurité. La configuration initiale est difficile, surtout dans un environnement basé sur un proxy, car elle nécessite de nombreuses autorisations et installations manuelles. Avis collecté par et hébergé sur G2.com.

Ce que j'aime le plus chez Apache Airflow, c'est sa flexibilité et ses puissantes capacités de planification. En tant que développeur, je peux concevoir des flux de travail complexes sous forme de code en utilisant Python, ce qui facilite le contrôle de version et la collaboration avec les coéquipiers. L'interface utilisateur est intuitive pour surveiller les exécutions de DAG et résoudre les problèmes, et le vaste écosystème d'intégrations d'Airflow me permet de me connecter à presque n'importe quel outil ou base de données. Avis collecté par et hébergé sur G2.com.

La courbe d'apprentissage est assez raide, en particulier lors de la configuration du planificateur et de la gestion des dépendances des tâches. Parfois, l'interface web d'Airflow semble lente, et le dépannage des problèmes peut devenir compliqué avec des DAGs complexes. De plus, bien qu'il y ait beaucoup d'intégrations, maintenir les dépendances compatibles lors des mises à jour n'est pas toujours facile. Avis collecté par et hébergé sur G2.com.

Airflow améliore l'observabilité des pipelines - à la fois des processus et des données - au plus haut niveau.

Il permet la distribution de l'exécution des pipelines parmi une équipe de parties prenantes ayant des niveaux techniques variés dans un environnement sûr et convivial. Avis collecté par et hébergé sur G2.com.

L'installation, la configuration et l'exécution ne sont pas simples, et un certain ajustement est nécessaire. Avis collecté par et hébergé sur G2.com.