Weights & Biases Avantages et Inconvénients

I like the flexibility to log custom parameters, and the colorful comparisons between models in for instance confusion matrices. Avis collecté par et hébergé sur G2.com.

There are a couple of features I would have liked, such as the ability to set a global normalization flag, or controlling which windows stay on screen on reload, maybe these features exist, in that case I just haven't been able to find them Avis collecté par et hébergé sur G2.com.

Nous sommes une petite équipe de 15 chercheurs. Après des années d'utilisation de tensorboard, nous avons décidé d'essayer des outils en ligne. Nous en avons essayé quelques-uns et avons découvert que WandB nous convient le mieux. Nous aimons vraiment la facilité d'utilisation, le fait que les expériences sont facilement partageables, et l'option de balayage des hyperparamètres. De plus, l'option de taguer toutes vos expériences et leur filtrage ultérieur est également excellente. Avis collecté par et hébergé sur G2.com.

WandB offre une option pour créer un rapport à partir de vos expériences. Ce serait bien d'utiliser ces rapports dans nos articles, cependant, pendant la période de révision, les articles doivent être anonymisés mais il n'y a pas d'option pour anonymiser les rapports. Avis collecté par et hébergé sur G2.com.

Everything works almost out of the box and it has a "nice look" once logged in Avis collecté par et hébergé sur G2.com.

I really can't resize images and masked images the way I want inside the GUI and looking at images on mobile is quite a nightmare Avis collecté par et hébergé sur G2.com.

L'aspect hébergé est excellent et si vous évitez de stocker de grands artefacts, trop d'histogrammes ou trop d'images, c'est très bon marché ou même gratuit pour une utilisation intensive. Je lance souvent des entraînements sur des systèmes distants et vérifier les sorties d'évaluation à distance peut être pénible avec d'autres logiciels comme TensorFlow. Vous devez vous assurer de faire fonctionner le serveur sur votre instance pour voir le tableau de bord. Avec W&B, vous obtenez des fonctionnalités comparables en termes de puissance, et vous n'avez rien à faire d'autre que d'exécuter votre script d'entraînement. En plus de l'hébergement, la fonctionnalité Sweeps est excellente pour le balayage d'hyper-paramètres et les groupes de courses prédéterminés dans des contextes multi-tâches. Avis collecté par et hébergé sur G2.com.

Certains éléments de l'interface utilisateur, comme le tableau de données des exécutions, peuvent être lents, et parfois l'actualisation automatique semble capricieuse. Avis collecté par et hébergé sur G2.com.

Ease of setting it up, the dashboard is pretty much each to use and allows to visualize a wide range of features at once. The integration is pretty much solid and works out of box for any script that I worked on Avis collecté par et hébergé sur G2.com.

I used to pre train certain checkpoints in a sequential manner or sometimes my runs used to break in between due to memory/connection issues from there on it was quite difficult to visualize all the previous run in a single curve using the dashboard, setting the x axis as wall time helped but the curve was still not a single continuous graph Avis collecté par et hébergé sur G2.com.

La meilleure chose à propos de W&B est que vous n'avez plus besoin de penser à la visualisation des performances. W&B s'en charge pour vous, peu importe le nombre de métriques que vous avez ou leur complexité. C'est aussi très simple à utiliser ! Avis collecté par et hébergé sur G2.com.

Je ne peux penser à rien que je n'aime pas, mon expérience a été très positive jusqu'à présent. Avis collecté par et hébergé sur G2.com.

La capacité de suivre tout, y compris les gradients, est un aspect merveilleux. Avis collecté par et hébergé sur G2.com.

Un problème est s'il y a un processus wandb zombie et que j'essaie de le tuer, cela fait terminer d'autres exécutions d'entraînement fonctionnelles. Avis collecté par et hébergé sur G2.com.

J'aime l'interface utilisateur Web, en particulier la manipulation des graphiques et des rapports car ils simplifient et visualisent de nombreux indicateurs et paramètres. J'aime aussi l'artifactory et le registre de modèles, ils aident à gérer le nombre incalculable de modèles créés lors d'un projet ML/DL. La gestion des balayages est également intéressante ! Nous construisons un outil d'automatisation autour de cela qui simplifie les balayages ML et nous aide ainsi à obtenir de meilleurs résultats. Enfin, j'adore l'assistance rapide et aimable que nous (Nvidia) recevons sur le canal Slack dédié. Vraiment apprécié ! Avis collecté par et hébergé sur G2.com.

Pas trop en fait :)

Je suppose que parfois l'interface utilisateur web est un peu lente. Avis collecté par et hébergé sur G2.com.

L'API en ligne est vraiment utile pour organiser les résultats et les projets. Avis collecté par et hébergé sur G2.com.

Dans le site en ligne, les graphiques montrant l'évolution d'une métrique, par exemple, ne peuvent pas être dézoomés facilement avec la molette de défilement et nous ne pouvons pas nous déplacer dans le graphique après avoir zoomé. Avis collecté par et hébergé sur G2.com.

Son intégration facile et transparente avec PyTorch Lightening et l'utilisation simple de l'API. Le modèle (artefact) et les journaux de journalisation m'aident également à retrouver un modèle qui était en cours d'entraînement il y a des mois. Avis collecté par et hébergé sur G2.com.

Rien pour l'instant. J'apprécierais plus de modes sombres et un contrôle de l'API pour donner des noms d'expériences, plutôt que d'avoir mon expérience nommée 'Tasty-Aadvark'. Avis collecté par et hébergé sur G2.com.