Reseñas y detalles del producto de WhyLabs

The core functionality is explicitly important when you are having AI/ML solutions running on production. Instead of spending time on manual checks (that can be prone to error) you can set up monitors to inform you if something is going wrong. It is flexible enough to build your cusotm metric and monitors which allows for versatile usage.

What is highly important to me is the contact with WhyLabs team. Their support is superb which results in fact that even if something is difficult to implement, I know I have people who will help me get the best out of the platform. Reseña recopilada por y alojada en G2.com.

Building custom monitors and metrics is a chellanging experience. I struggle sometimes with code issues so better FAQ or documentation could be helpfull to avoid them. Reseña recopilada por y alojada en G2.com.

Una de las características destacadas de WhyLabs es su capacidad robusta de observabilidad de datos. Proporciona monitoreo continuo de las canalizaciones de datos y modelos de ML, lo que permite a los equipos identificar rápidamente problemas como el desplazamiento de datos, la degradación del modelo y el sesgo de entrenamiento-servicio. La integración que preserva la privacidad de la plataforma asegura que los datos puedan ser analizados sin moverlos o duplicarlos, lo cual es crítico para mantener la seguridad y privacidad en industrias sensibles como la salud y las finanzas. Reseña recopilada por y alojada en G2.com.

Un posible inconveniente de WhyLabs es su relativamente limitado número de reseñas y comentarios de usuarios debido a su novedad en el mercado, lo que dificulta que los usuarios potenciales evalúen su rendimiento en el mundo real a gran escala. Esta falta de reseñas detalladas puede generar preocupaciones sobre su madurez e infraestructura de soporte. Además, dado que es una plataforma más nueva, algunas funciones avanzadas podrían estar aún en desarrollo, y podría haber curvas de aprendizaje pronunciadas para equipos no familiarizados con herramientas de observabilidad en el aprendizaje automático. Reseña recopilada por y alojada en G2.com.

* The customer support is very helpful and proactive

* Tool allows for easy ingestion of big number of features and setting up initial monitoring on them

* We can use it to monitor both: input quality and model performance

* The alerts can be raised to specific group of users via specific channels (email/slack), which is helpful Reseña recopilada por y alojada en G2.com.

* It can be challenging to setup the monitoring in the correct way when it comes to sensitivty - it requires a lot of trial and error

* Some actions are not possible via UI and require specific API calls

* Documentation can be hard to navigate Reseña recopilada por y alojada en G2.com.

Genial para colaborar con; muy receptivo; realmente aprecio sus horas de oficina para ayudar con los problemas que surgen; muchas soluciones innovadoras para diferentes tipos de modelos de ML que realmente nos ayudaron dada la amplia variedad de modelos de ML que ejecutamos en la empresa. Reseña recopilada por y alojada en G2.com.

¡Nada importante que mencionar! Resolvimos todo y el equipo fue muy servicial. Reseña recopilada por y alojada en G2.com.

El aspecto más destacado para nosotros fue la facilidad de integración. Fue bastante sencillo, casi igual que el código de muestra para incorporar LangKit en nuestra canalización de LLM y cargarlo en WhyLabs. Los documentos de inicio eran claros y concisos. Incluso para empresas con recursos limitados como la nuestra, WhyLabs AI Observatory demuestra ser una solución accesible y fácilmente adaptable. Reseña recopilada por y alojada en G2.com.

Las herramientas de visualización de datos son altamente capaces, aunque hay una curva de aprendizaje para dominarlas. Sin embargo, su equipo de éxito del cliente y soporte es receptivo, servicial y ha superado constantemente las expectativas para asegurarse de que utilicemos la plataforma en su máximo potencial. Reseña recopilada por y alojada en G2.com.

WhyLabs is the second observability platform I have ever used, and I can say the core features I like about the platform is that it is easy to set up and implement the features, the checks and metrics were already pre-loaded so I did not need to do much in configuring the application, and monitoring was not difficult to get started with. It also integrates well with the serving and data libraries we used for the production tutorial setup. Reseña recopilada por y alojada en G2.com.

Nothing so far, I only experienced a stability issues once (sometime in 2022), but support was able to help me quickly fix it. Reseña recopilada por y alojada en G2.com.

He usado WhyLabs durante unas semanas y quedé extremadamente satisfecho con él. Evaluaré algunas dimensiones de la herramienta que resumen mi experiencia con ella.

Ingesta de Datos Fácil:

La API de ingesta es sencilla de usar y admite múltiples conectores como BigQuery, Databricks y Spark, facilitando la importación de datos. El uso de Data Profiling por parte de Whylabs asegura un procesamiento de datos rápido y seguro, eliminando la necesidad de cargar conjuntos de datos completos, y haciendo que todo el proceso sea muy seguro, ya que tus datos no salen de tus servidores.

Características de Datos Confiables:

Whylabs ofrece todas las métricas estándar de características con precisión. El seguimiento de la deriva de datos y modelos es muy sencillo usando Monitors. Además, la plataforma admite la creación de métricas personalizadas durante o después de la ingesta. La agrupación por variables (segmentos) funciona bien, pero debe definirse durante la ingesta. Luego puedes analizar las características del conjunto de datos y seguir el rendimiento del modelo por segmento.

Monitores Flexibles:

El sistema de monitoreo en Whylabs es altamente adaptable y fácil de usar, cubriendo múltiples variables con facilidad. Los monitores son fáciles de configurar a través de la interfaz de usuario o la importación de JSON, con notificaciones resumidas para cada monitor, manteniendo a los usuarios informados sin abrumarlos. Además, los monitores son serializables en JSON, lo cual es muy útil ya que puedes seguirlos con control de versiones.

Usabilidad Amigable para el Usuario:

Whylabs tiene una interfaz de usuario limpia e intuitiva, simplificando la navegación para los usuarios. Aunque algunas características avanzadas pueden requerir conocimientos de programación, la mayoría de las tareas se pueden realizar dentro de la interfaz de usuario. Gracias al perfilado de datos, Whylabs ofrece un rendimiento rápido sin comprometer la precisión.

Documentación Sólida:

La documentación proporcionada por Whylabs es completa y fácil de entender, permitiendo a los usuarios aprovechar al máximo la plataforma.

Precios:

Es simplemente más barato que su competencia mientras tiene características de primera calidad.

Soporte al Cliente:

Siempre son muy serviciales, respondiendo a todas nuestras preguntas y teniendo varias llamadas mostrándonos diferentes casos de uso directamente en la plataforma.

En general, Whylabs ofrece una solución sencilla, eficiente y asequible para monitorear modelos de aprendizaje automático, con fácil ingesta de datos, análisis de características confiables y opciones de monitoreo flexibles. Reseña recopilada por y alojada en G2.com.

Hay algunos inconvenientes:

- Los paneles están en beta y, aunque funcionales, carecen de pulido en términos de interfaz de usuario. Están trabajando activamente en esto, por lo que probablemente unos meses después de esta revisión esto ya podría estar solucionado.

- La definición de agrupaciones por variables debe hacerse en el momento de la ingestión, lo que limita la flexibilidad para el análisis posterior a la ingestión.

Dicho esto, son muy receptivos a los comentarios y pueden cambiar o agregar funciones según tus necesidades. En nuestro caso, los paneles eran importantes y están trabajando en ellos. Reseña recopilada por y alojada en G2.com.

Mi experiencia con la Plataforma WhyLabs fue esclarecedora, ofreciendo intuiciones intuitivas sobre el comportamiento de los modelos de IA y mejorando mi comprensión de la observabilidad de la IA. La mejor parte de la interfaz es su interfaz amigable y su suite completa de análisis que proporciona valiosas ideas sobre el comportamiento de los modelos de IA y que también habilitaría un panel para el monitoreo de datos, características del modelo. También facilita el monitoreo en tiempo real, mejorando en última instancia la eficiencia de los procesos de desarrollo de IA. También te da la ventaja de personalizar las características del modelo según los requisitos del proyecto. Reseña recopilada por y alojada en G2.com.

Pocas opciones avanzadas de personalización para análisis no están disponibles por ahora, pero según se informó, estarían disponibles pronto como una actualización en la plataforma. Así que eso resolvería el inconveniente en el futuro. Reseña recopilada por y alojada en G2.com.

WhyLabs is so useful for debugging, maintaining, and developing production ML systems. It's portable, highly configurable, and provides unified visibility across a broad range of systems/services in a production ML ecosystem. It dramatically improves ML devops and is incredibly easy to get started. It integrates very easily with all the systems I've used, implementation is a breeze, and there's very low friction to get started. I've caught tons of issues using it. Reseña recopilada por y alojada en G2.com.

I don't really have any complaints about it, it does its thing incredibly well for my use cases. Reseña recopilada por y alojada en G2.com.

The UI is very user friendly and the support team is extremely responsive and helpful. Reseña recopilada por y alojada en G2.com.

Some features such as deleting a profile or changing the data type of a feature can only be done through the API. Reseña recopilada por y alojada en G2.com.