Avis et détails du produit de Weights & Biases

J'ai d'abord appris à connaître w&b il y a 5 ans au lycée, et je l'ai utilisé pour quelques projets. Je l'utilise maintenant tous les jours et j'ai convaincu plusieurs collègues, à l'intérieur et à l'extérieur du laboratoire, d'utiliser w&b. Avis collecté par et hébergé sur G2.com.

je souhaite qu'il y ait un moyen de visualiser les graphiques localement/hors ligne, ou au moins pouvoir visualiser les graphiques avec latence. Avis collecté par et hébergé sur G2.com.

I like how it seemlessly integrates into the workflow and reports all relevant information. Avis collecté par et hébergé sur G2.com.

I did not like how it remains logged in even without the login command, and how it starts a different log for the same 'run name'. Avis collecté par et hébergé sur G2.com.

It is very quick to get started with logging models and performance to wandb, implementation and integration are readily intuitive and straightforward.

There are some useful available features such as model sweeping and other filtering/grouping mechanisms with runs logged in a given project.

Whenever I need to keep track of ML model performance, I use wandb. Avis collecté par et hébergé sur G2.com.

The number of concurrent runs is somehow too limited if one launches jobs to a cluster.

It is most of the time hard to find the relevant information you are seeking for in the documentation, hence help comes from issues dealt online by users on different platforms (github, stackoverflow, etc.) Avis collecté par et hébergé sur G2.com.

Extrêmement facile à utiliser (à la fois dans le navigateur ou via l'API) + lanceur de balayage qui permet de distribuer des expériences sur différentes machines Avis collecté par et hébergé sur G2.com.

Il n'existe pas de pipeline facile pour la validation croisée... En tout cas, cela ne devient jamais aussi fluide que les autres fonctionnalités par défaut.

Il est conçu pour le cadre où vous avez des ensembles de train, val, test fixes. Avis collecté par et hébergé sur G2.com.

Managing runs that are lauched across different machines Avis collecté par et hébergé sur G2.com.

All new accounts have to be a team not personal Avis collecté par et hébergé sur G2.com.

graphiques, journaux d'expériences, facile à partager au sein de l'équipe Avis collecté par et hébergé sur G2.com.

trop cher. la latence est parfois mauvaise aussi. Avis collecté par et hébergé sur G2.com.

i use it as my single point of knowledge for all my experiments results, including model weights, configs, false analysis etc Avis collecté par et hébergé sur G2.com.

many specific use cases, which are not that specific imo, i had to implement myself, Avis collecté par et hébergé sur G2.com.

W&B est tellement convivial et utile pour tout praticien en apprentissage automatique, mais si vous êtes sérieux, vous devez vous familiariser avec cet outil. Non seulement vous pouvez surveiller la performance de vos différents changements d'architecture et hyper-paramètres, mais vous pouvez également déboguer certains des problèmes avec votre entraînement. Par exemple, une fois, je me suis rendu compte que CUDA avait échoué pour une raison quelconque et que j'entraînais sur CPU. Le tableau de bord du système est également très utile pour trouver la bonne taille de lot pour utiliser les derniers Mo de votre VRAM, si vous voyez ce que je veux dire ;) . Toutes les différentes options de traçage et les capacités de comparaison de modèles/hyper-paramètres vous donnent beaucoup de liberté et de puissance pour entraîner efficacement des modèles d'apprentissage automatique. J'apprécie également le fait que le produit évolue constamment et s'adapte au rythme de la scène de l'IA. Leurs articles de blog sont également une mine d'or de connaissances en apprentissage automatique, ce qui montre que des personnes très sérieuses en ML travaillent sur le produit. Avis collecté par et hébergé sur G2.com.

L'interface utilisateur a un très petit délai dans la mise à jour de la progression de votre formation, ce que vous pourriez trouver ennuyeux si vous êtes une personne impatiente. De plus, j'aurais aimé qu'ils puissent ajouter d'autres fonctionnalités comme le temps estimé pour terminer la formation ou même afficher les échelles de temps des étapes de formation sur les graphiques (peut-être qu'il y a un moyen de l'activer mais je n'ai pas trouvé). Avis collecté par et hébergé sur G2.com.

Poids et biais utilisés pour la tâche de traitement du langage naturel où je dois entraîner des modèles pré-entraînés comme Bert et RoBerta pour des modèles de classification. En utilisant Poids et Biais, je n'ai pas à gérer les graphiques de poids, de perte et de précision. Avis collecté par et hébergé sur G2.com.

Honnêtement rien, seulement je pense que la partie confusion en regardant différents graphiques analytiques obtient des informations précieuses. Les noms par défaut mentionnés sont également un peu longs et déroutants. Avis collecté par et hébergé sur G2.com.

Interface utilisateur très propre et facile à comprendre. Intégration facile avec Tensorflow, c'est agréable de voir les métriques par époque. Avis collecté par et hébergé sur G2.com.

Ce serait bien s'il y avait une fonctionnalité de déploiement de modèle. Ce serait également bien d'avoir une option d'utilisateur de service ou une clé API d'équipe. Étant donné que nos exécutions sont déclenchées à l'aide des pipelines AWS Sagemaker, nous avons dû coder en dur les clés API utilisateur d'un membre de notre équipe, ce qui n'est pas la meilleure solution puisqu'il n'est pas toujours la personne qui déclenche l'exécution, mais c'est toujours lié à lui. Avis collecté par et hébergé sur G2.com.