Spark Streaming Avantages et Inconvénients

Diffusion et gestion de grands ensembles de données en Avis collecté par et hébergé sur G2.com.

Non, je n'ai pas eu de problèmes en utilisant Spark Streaming. Avis collecté par et hébergé sur G2.com.

C'est un outil très utile qui peut vous enseigner des connaissances plus approfondies sur le big data. Avis collecté par et hébergé sur G2.com.

C'est très compliqué de comprendre les fonctions. Avis collecté par et hébergé sur G2.com.

Compatibilité native avec Spark et facilité d'utilisation Avis collecté par et hébergé sur G2.com.

Une connaissance de base de Spark est requise pour commencer avec. Avis collecté par et hébergé sur G2.com.

Spark streaming has great ecosystem of spark which is a great advantage and it is scalable and fault tolerant Avis collecté par et hébergé sur G2.com.

Nothing much but according to me data visualization can be more enhanced and cost can be considered. Avis collecté par et hébergé sur G2.com.

You can use spark streaming to process data from wide varieties of system in a distributed manner Avis collecté par et hébergé sur G2.com.

File management and latency issue because of near real processing Avis collecté par et hébergé sur G2.com.

Intuitive API and robust runtime. Spark can process continuous streams at high data rates. Easy to scale to multiple tasks/workers and numerous nodes in a cluster, providing the performances required. Many clients and services are available to integrate with external storage, database, and streaming frameworks. Avis collecté par et hébergé sur G2.com.

Sometimes is difficult to debug, troubleshoot a pipeline. Installation and configuration are complex. Avis collecté par et hébergé sur G2.com.

It can handle large amount of datasets in fairly quick manner. The processing is very fast. Avis collecté par et hébergé sur G2.com.

It requires ample amount of training and expertise to use and process. Avis collecté par et hébergé sur G2.com.

I love the ease of use and how intuitive it is. Avis collecté par et hébergé sur G2.com.

I would love an easier file management system. Avis collecté par et hébergé sur G2.com.

Spark docs are saying, it is not atomic but it is near-atomic in the way of committing data but it loses in consistency. In our case, we are using a spark engine to read JSON from Apache kafka and write it to Data lake properties. Best part is streaming application on batch based. Avis collecté par et hébergé sur G2.com.

It is not good in processing in-memory data when it auto-commit is disabled. Avis collecté par et hébergé sur G2.com.