Avis et détails du produit de Google Cloud Dataproc

Je travaille chez Mahindra en tant qu'ingénieur cloud, tous les cas d'utilisation que nous avons dans notre entreprise, je vais travailler dessus, comme déployer des applications sur une instance de calcul, GKE et passer le service cloud run aussi. Et pour la partie analytique des données : nous utilisons cloud composer, big query, data proc cluster. Comme stockage, nous utilisons cloud spanner, gcs, sql. Du côté de l'interface utilisateur et du service, Google Cloud est correct. Avis collecté par et hébergé sur G2.com.

L'interface utilisateur de Google Cloud pour IAM n'est pas bonne, la vitesse n'est pas bonne non plus du côté du réseau. L'équipe de Google doit également travailler sur la documentation. L'équipe de Google doit également travailler sur la disponibilité des instances dans toutes les régions. Avis collecté par et hébergé sur G2.com.

1. La suppression des clusters inactifs aide à économiser des coûts lorsque le cluster n'est pas utilisé.

2. L'autoscaling gère efficacement la charge en période de pointe.

3. L'équipe de support GCP est utile en cas de problèmes critiques.

4. Le support de l'API Java est excellent. La création de clusters, le traitement des données ETL et la suppression de clusters peuvent être effectués dans un seul pipeline. Avis collecté par et hébergé sur G2.com.

1. La création de clusters prend quelques minutes, ce qui n'est pas très pratique.

2. Parfois, l'autoscaling ne se déclenche pas à temps et les pipelines échouent avec une erreur de type dataproc-agent-failure. Avis collecté par et hébergé sur G2.com.

Meilleurs services moins chers fournis par Google Cloud avec la meilleure évolutivité et certains services entièrement gérés avec la meilleure interface utilisateur. Avis collecté par et hébergé sur G2.com.

Il y a certains services qui nécessitent une certaine clarté, comme certaines configurations qui sont bloquées par Google lui-même. Avis collecté par et hébergé sur G2.com.

That has a lot of services and I especially like the logging. Avis collecté par et hébergé sur G2.com.

The documentation can be chaotic and daunting. I sometimes loose myself there. Avis collecté par et hébergé sur G2.com.

Un excellent outil qui peut-être n'est pas aussi populaire qu'AWS EMR, mais qui dépasse ses attentes. Une mise en œuvre élégante. Avis collecté par et hébergé sur G2.com.

L'utilisation du paradigme de stockage et de traitement GCP peut causer des problèmes pour les utilisateurs habitués à Hadoop sur site. Avis collecté par et hébergé sur G2.com.

Google Cloud DataProc convient le mieux pour ce qui suit :

Open Source, analytique de données gérée et évolutive

Sans serveur ou gérer des clusters par vous-même

A de bonnes intégrations avec d'autres services GCP

Cluster transitoire sécurisé et rentable avec facturation à la seconde

Écosystème Hadoop dans l'environnement GCP géré

Facile à migrer les charges de travail Hadoop existantes sur site ainsi que les entrepôts Hive. Avis collecté par et hébergé sur G2.com.

Les aversions sont ci-dessous :

La réduction d'échelle a des problèmes de performance et d'autres problèmes en raison d'une période de refroidissement de la tâche en attente.

L'option sans serveur devrait être améliorée avec une mise à l'échelle basée sur le SLA.

Toujours pour les options de streaming, optez pour Dataflow.

Il utilise toujours le moteur de calcul, pas GKE (Google Kubernetes Engine).

Le stockage des données GCS persistantes (HCFS - système de fichiers compatible Hadoop) à partir de Dataproc présente une certaine lenteur en raison de la séparation du calcul/stockage - c'est notre option de choisir quel stockage pour quel traitement.

Il a un stockage HDFS alloué avec chaque cluster de nœuds Dataproc, mais pas bon pour le stockage de grandes quantités de données localement. Avis collecté par et hébergé sur G2.com.

Dev-Ops expertise amicale, C'est très facile à utiliser.

Il offre presque 99,9% de disponibilité et de vitesse de connexion.

Beaucoup de documentation disponible sur son site web.

Un utilisateur de site web normal cherche toujours des solutions bon marché.

Google offre un service cloud gratuit de 300 dollars pendant 1 an, ce qui est très attractif pour les petits utilisateurs de sites web.

Ceux-ci sont très évolutifs. Avis collecté par et hébergé sur G2.com.

Entrée tardive dans le marketing Cloud.

Moins de fonctionnalités et de services.

Certaines fonctionnalités sont encore en version bêta.

Moins de centres de données dans le monde. Avis collecté par et hébergé sur G2.com.

Qu'il soit sans serveur - pas d'infrastructure à gérer. Grande victoire. Points bonus pour avoir Spark (plus les API), Hive et Hadoop préinstallés sur les clusters. L'option de lancer des clusters d'instances gérées est également très appréciable. Avis collecté par et hébergé sur G2.com.

C'est un choix difficile - soit le manque de capacités d'administration et de surveillance d'entreprise, soit l'incapacité à dépasser de manière flexible une tarification forfaitaire à capacité fixe. Avis collecté par et hébergé sur G2.com.

I like the ease of use for building clusters quickly and efficiently. At the same time I can resize them at any moment in time. I have plenty of nodes so that I don't have to be concerned about pipelines outgrowing my clusters. I like how the price is based on actual use, and that they gave me a $300 credit towards my project. Avis collecté par et hébergé sur G2.com.

Sometimes it can be not user friendly and clusters can take time to re start. Otherwise I have no other complaints. Avis collecté par et hébergé sur G2.com.

The best way to manage Spark and Hadoop service that has been offered on the Google Cloud Platform. Avis collecté par et hébergé sur G2.com.

it doesn’t work with custom sources. For the standard computer, it is still the most expensive component Avis collecté par et hébergé sur G2.com.