Spark Streaming Vor- und Nachteile

Streaming und Umgang mit großen Datensätzen in Bewertung gesammelt von und auf G2.com gehostet.

Nein, ich hatte keine Probleme bei der Verwendung von Spark Streaming. Bewertung gesammelt von und auf G2.com gehostet.

Es ist ein sehr nützliches Werkzeug, das Ihnen ein tieferes Wissen über Big Data vermitteln kann. Bewertung gesammelt von und auf G2.com gehostet.

Es ist sehr kompliziert, die Funktionen zu verstehen. Bewertung gesammelt von und auf G2.com gehostet.

Native Kompatibilität mit Spark und Benutzerfreundlichkeit Bewertung gesammelt von und auf G2.com gehostet.

Grundkenntnisse von Spark sind erforderlich, um zu beginnen. Bewertung gesammelt von und auf G2.com gehostet.

Spark streaming has great ecosystem of spark which is a great advantage and it is scalable and fault tolerant Bewertung gesammelt von und auf G2.com gehostet.

Nothing much but according to me data visualization can be more enhanced and cost can be considered. Bewertung gesammelt von und auf G2.com gehostet.

You can use spark streaming to process data from wide varieties of system in a distributed manner Bewertung gesammelt von und auf G2.com gehostet.

File management and latency issue because of near real processing Bewertung gesammelt von und auf G2.com gehostet.

Intuitive API and robust runtime. Spark can process continuous streams at high data rates. Easy to scale to multiple tasks/workers and numerous nodes in a cluster, providing the performances required. Many clients and services are available to integrate with external storage, database, and streaming frameworks. Bewertung gesammelt von und auf G2.com gehostet.

Sometimes is difficult to debug, troubleshoot a pipeline. Installation and configuration are complex. Bewertung gesammelt von und auf G2.com gehostet.

It can handle large amount of datasets in fairly quick manner. The processing is very fast. Bewertung gesammelt von und auf G2.com gehostet.

It requires ample amount of training and expertise to use and process. Bewertung gesammelt von und auf G2.com gehostet.

I love the ease of use and how intuitive it is. Bewertung gesammelt von und auf G2.com gehostet.

I would love an easier file management system. Bewertung gesammelt von und auf G2.com gehostet.

Spark docs are saying, it is not atomic but it is near-atomic in the way of committing data but it loses in consistency. In our case, we are using a spark engine to read JSON from Apache kafka and write it to Data lake properties. Best part is streaming application on batch based. Bewertung gesammelt von und auf G2.com gehostet.

It is not good in processing in-memory data when it auto-commit is disabled. Bewertung gesammelt von und auf G2.com gehostet.