WhyLabs Bewertungen & Produktdetails

The core functionality is explicitly important when you are having AI/ML solutions running on production. Instead of spending time on manual checks (that can be prone to error) you can set up monitors to inform you if something is going wrong. It is flexible enough to build your cusotm metric and monitors which allows for versatile usage.

What is highly important to me is the contact with WhyLabs team. Their support is superb which results in fact that even if something is difficult to implement, I know I have people who will help me get the best out of the platform. Bewertung gesammelt von und auf G2.com gehostet.

Building custom monitors and metrics is a chellanging experience. I struggle sometimes with code issues so better FAQ or documentation could be helpfull to avoid them. Bewertung gesammelt von und auf G2.com gehostet.

Eines der herausragenden Merkmale von WhyLabs sind seine robusten Datenüberwachungsfähigkeiten. Es bietet kontinuierliche Überwachung von Datenpipelines und ML-Modellen, sodass Teams Probleme wie Datenverschiebung, Modellverschlechterung und Trainings-Serving-Skew schnell identifizieren können. Die datenschutzfreundliche Integration der Plattform stellt sicher, dass Daten analysiert werden können, ohne sie zu verschieben oder zu duplizieren, was entscheidend für die Aufrechterhaltung von Sicherheit und Datenschutz in sensiblen Branchen wie dem Gesundheitswesen und der Finanzbranche ist. Bewertung gesammelt von und auf G2.com gehostet.

Ein potenzieller Nachteil von WhyLabs ist die relativ begrenzte Anzahl an Nutzerbewertungen und Feedbacks aufgrund seiner Neuheit auf dem Markt, was es potenziellen Nutzern erschwert, seine Leistung in der Praxis im großen Maßstab einzuschätzen. Dieser Mangel an detaillierten Bewertungen kann Bedenken hinsichtlich seiner Reife und der Unterstützungsinfrastruktur aufwerfen. Da es sich zudem um eine neuere Plattform handelt, könnten einige fortgeschrittene Funktionen noch in der Entwicklung sein, und es könnte steile Lernkurven für Teams geben, die mit Beobachtungswerkzeugen im maschinellen Lernen nicht vertraut sind. Bewertung gesammelt von und auf G2.com gehostet.

* The customer support is very helpful and proactive

* Tool allows for easy ingestion of big number of features and setting up initial monitoring on them

* We can use it to monitor both: input quality and model performance

* The alerts can be raised to specific group of users via specific channels (email/slack), which is helpful Bewertung gesammelt von und auf G2.com gehostet.

* It can be challenging to setup the monitoring in the correct way when it comes to sensitivty - it requires a lot of trial and error

* Some actions are not possible via UI and require specific API calls

* Documentation can be hard to navigate Bewertung gesammelt von und auf G2.com gehostet.

Großartig, mit ihnen zusammenzuarbeiten; sehr reaktionsschnell; schätze wirklich ihre OHs, um bei auftretenden Problemen zu helfen; viele unkonventionelle Lösungen für verschiedene Arten von ML-Modellen, die uns wirklich geholfen haben, angesichts der großen Vielfalt an ML-Modellen, die wir im Unternehmen betreiben. Bewertung gesammelt von und auf G2.com gehostet.

Nichts Großes zu erwähnen! Wir haben alles gelöst und das Team war sehr hilfsbereit. Bewertung gesammelt von und auf G2.com gehostet.

Der herausragendste Aspekt für uns war die einfache Integration. Es war ziemlich unkompliziert, fast genauso wie der Beispielcode, um LangKit in unsere LLM-Pipeline zu integrieren und es zu WhyLabs hochzuladen. Die Einstiegsdokumentation war klar und prägnant. Selbst für Unternehmen mit begrenzten Ressourcen wie unserem erweist sich das WhyLabs AI Observatory als zugängliche und leicht anpassbare Lösung. Bewertung gesammelt von und auf G2.com gehostet.

Die Datenvisualisierungswerkzeuge sind sehr leistungsfähig, obwohl es eine gewisse Lernkurve gibt, um sie zu meistern. Ihr Kundenservice- und Support-Team ist jedoch reaktionsschnell, hilfsbereit und hat konsequent mehr getan, als erwartet, um sicherzustellen, dass wir die Plattform in vollem Umfang nutzen. Bewertung gesammelt von und auf G2.com gehostet.

WhyLabs is the second observability platform I have ever used, and I can say the core features I like about the platform is that it is easy to set up and implement the features, the checks and metrics were already pre-loaded so I did not need to do much in configuring the application, and monitoring was not difficult to get started with. It also integrates well with the serving and data libraries we used for the production tutorial setup. Bewertung gesammelt von und auf G2.com gehostet.

Nothing so far, I only experienced a stability issues once (sometime in 2022), but support was able to help me quickly fix it. Bewertung gesammelt von und auf G2.com gehostet.

Ich habe WhyLabs ein paar Wochen lang genutzt und war äußerst zufrieden damit! Ich werde einige Dimensionen des Tools bewerten, die meine Erfahrung damit zusammenfassen.

Einfache Datenaufnahme:

Die Ingestions-API ist einfach zu verwenden und unterstützt mehrere Konnektoren wie BigQuery, Databricks und Spark, was den Datenimport erleichtert. Die Verwendung von Data Profiling durch Whylabs gewährleistet eine schnelle und sichere Datenverarbeitung, wodurch das Hochladen ganzer Datensätze überflüssig wird und der gesamte Prozess sehr sicher ist, da Ihre Daten Ihre Server nicht verlassen.

Zuverlässige Datenfunktionen:

Whylabs liefert alle Standard-Feature-Metriken genau. Das Verfolgen von Daten- und Modellabweichungen ist mit Monitoren sehr einfach. Außerdem unterstützt die Plattform die Erstellung benutzerdefinierter Metriken während oder nach der Ingestion. Die Gruppierung nach Variablen (Segmenten) funktioniert gut, muss jedoch während der Ingestion definiert werden. Dann können Sie Datensatzmerkmale analysieren und die Modellleistung pro Segment verfolgen.

Flexible Monitore:

Das Überwachungssystem in Whylabs ist hochgradig anpassungsfähig und benutzerfreundlich und deckt mühelos mehrere Variablen ab. Monitore sind einfach über die Benutzeroberfläche oder den JSON-Import einzurichten, mit zusammengefassten Benachrichtigungen für jeden Monitor, die Benutzer informieren, ohne sie zu überfordern. Zusätzlich sind Monitore JSON-serialisierbar, was sehr hilfreich ist, da Sie sie mit Versionskontrolle verfolgen können.

Benutzerfreundliche Bedienbarkeit:

Whylabs hat eine saubere und intuitive Benutzeroberfläche, die die Navigation für Benutzer vereinfacht. Während einige erweiterte Funktionen Programmierkenntnisse erfordern können, können die meisten Aufgaben innerhalb der Benutzeroberfläche erledigt werden. Dank des Data Profiling liefert Whylabs eine schnelle Leistung, ohne die Genauigkeit zu beeinträchtigen.

Solide Dokumentation:

Die von Whylabs bereitgestellte Dokumentation ist umfassend und leicht verständlich, sodass Benutzer das Beste aus der Plattform herausholen können.

Preisgestaltung:

Es ist einfach günstiger als die Konkurrenz, während es erstklassige Funktionen bietet.

Kundensupport:

Sie sind immer sehr hilfsbereit, beantworten alle unsere Fragen und führen mehrere Anrufe durch, um uns verschiedene Anwendungsfälle direkt auf der Plattform zu zeigen.

Insgesamt bietet Whylabs eine unkomplizierte, effiziente und erschwingliche Lösung zur Überwachung von Machine-Learning-Modellen, mit einfacher Datenaufnahme, zuverlässiger Merkmalsanalyse und flexiblen Überwachungsoptionen. Bewertung gesammelt von und auf G2.com gehostet.

Es gibt ein paar Nachteile:

- Dashboards befinden sich in der Beta-Phase und sind zwar funktional, aber es fehlt ihnen an Feinschliff in Bezug auf die Benutzeroberfläche. Sie arbeiten aktiv daran, sodass dies wahrscheinlich ein paar Monate nach dieser Überprüfung bereits behoben sein könnte.

- Die Definition von Gruppierungen nach Variablen muss zum Zeitpunkt der Erfassung erfolgen, was die Flexibilität für Analysen nach der Erfassung einschränkt.

Das gesagt, sie sind sehr offen für Feedback und sie könnten Funktionen basierend auf Ihren Bedürfnissen ändern oder hinzufügen. In unserem Fall waren Dashboards wichtig und sie arbeiten daran. Bewertung gesammelt von und auf G2.com gehostet.

Meine Erfahrung mit der WhyLabs-Plattform war erhellend und bot intuitive Einblicke in das Verhalten von KI-Modellen und verbesserte mein Verständnis für die Beobachtbarkeit von KI. Der beste Teil der Schnittstelle ist ihre benutzerfreundliche Oberfläche und die umfassende Suite von Analysen, die wertvolle Einblicke in das Verhalten von KI-Modellen bieten und auch ein Dashboard für die Datenüberwachung und Modellmerkmale ermöglichen. Sie erleichtert auch die Echtzeitüberwachung, was letztendlich die Effizienz der KI-Entwicklungsprozesse verbessert. Sie bietet auch die Möglichkeit, die Modellmerkmale entsprechend den Projektanforderungen anzupassen. Bewertung gesammelt von und auf G2.com gehostet.

Einige fortgeschrittene Anpassungsoptionen für Analysen sind derzeit nicht verfügbar, aber wie mitgeteilt wurde, werden sie bald als Update auf der Plattform verfügbar sein. Das löst also das Problem in der Zukunft. Bewertung gesammelt von und auf G2.com gehostet.

WhyLabs is so useful for debugging, maintaining, and developing production ML systems. It's portable, highly configurable, and provides unified visibility across a broad range of systems/services in a production ML ecosystem. It dramatically improves ML devops and is incredibly easy to get started. It integrates very easily with all the systems I've used, implementation is a breeze, and there's very low friction to get started. I've caught tons of issues using it. Bewertung gesammelt von und auf G2.com gehostet.

I don't really have any complaints about it, it does its thing incredibly well for my use cases. Bewertung gesammelt von und auf G2.com gehostet.

The UI is very user friendly and the support team is extremely responsive and helpful. Bewertung gesammelt von und auf G2.com gehostet.

Some features such as deleting a profile or changing the data type of a feature can only be done through the API. Bewertung gesammelt von und auf G2.com gehostet.