DoE/Fit Model/Stepwise : Visualisation interactive des performances des modèlesBonjour les utilisateurs JMP et l'équipe JMP,
J'ai eu une vieille idée en regardant le visuel "Split history" de la plateforme Decision Tree (voir l'image "Split_history" ci-jointe), et en pensant à cette visualisation pour les modèles DoE créés par les plateformes "Fit Model" ou "Fit Stepwise".
Serait-il possible et réalisable d'ajouter dans ces plateformes (ou dans l'une de ces plateformes) un graphique similaire montrant l'évolution des différentes métriques du modèle (comme R², R² ajusté, RMSE, valeur p du modèle, ... peut-être pour être choisi/sélectionné par l'utilisateur) afin d'aider l'utilisateur à définir le meilleur modèle possible (peut-être comme option dans le triangle rouge comme "Split history") ?
Il peut s'agir d'une sorte de graphique, qui se met à jour chaque fois que l'utilisateur supprime un terme du modèle ou en ajoute un, et qui montre le résultat de cette étape sur différentes métriques par rapport aux modèles/étapes précédents, afin que l'utilisateur ait une aperçu de l'ampleur du changement pour le modèle en fonction du terme supprimé/ajouté (voir par exemple l'image "DoE-Model_selection-help").
Peut-être que cette idée serait plus facile à mettre en œuvre sur la plateforme Fit Stepwise, car cette plateforme affiche déjà l'historique des étapes et diverses métriques liées à chaque modèle (voir image "DoE-Stepwise").
Je partage avec vous un datatable avec un exemple de DoE, avec différents niveaux de bruit sur la réponse. Dans les différents scripts "Paramètres et sélection des modèles de table...", j'ai sauvegardé les différentes métriques pour chaque étape du modèle, et créé un profileur avec diverses fonctions et désirabilités (R², R² PRESS, RMSE, etc...). Le but était d'utiliser le profileur afin de trouver la meilleure étape de modèle possible.
J'espère que cela ne semble pas trop fou ou trop complexe, car je considère cette nouvelle fonctionnalité comme une bonne opportunité pour les créateurs de modèles d'examiner rapidement l'impact des termes sur leurs modèles, de manière simple. La plateforme de régression généralisée dispose également d'une visualisation similaire (« Chemin de solution ») qui aide beaucoup à décider du modèle.
Je serais intéressé d'avoir des retours à ce sujet,
Exploration et visualisation des donnéesConception d'expériencesRe : DoE/Fit Model/Stepwise : Visualisation interactive des performances des modèles - Statut changé en : ReconnuSalut @Victor_G , Merci pour votre suggestion! Nous avons enregistré votre demande et la prendrons en considération.
Objet : DoE/Fit Model/Stepwise : Visualisation interactive des performances des modèles – Statut changé en : InvestigatingSalut @Victor_G , merci pour cette suggestion - j'y vois beaucoup de valeur.
Il existe une variante disponible dans Stepwise, mais les graphiques ne sont pas aussi élégants que le chemin de la solution ou l'historique divisé, et ils ne sont pas interactifs. Nous en discuterons avec notre équipe de développement.
Cordialement, Mia
Re : DoE/Fit Model/Stepwise : Visualisation interactive des performances des modèlesMerci @mia_stephens pour les retours !
Je pense que la visualisation et l'interactivité seraient des aspects clés ici, afin que les utilisateurs puissent vraiment explorer les différents modèles (à travers différentes métriques) et mieux comprendre/visualiser les situations de sous-ajustement ou de sur-ajustement.
Re: DoE/Fit Model/Stepwise : Visualisation interactive des performances des modèles - Statut modifié en : Reconnu
