DoE/Fit Model/Stepwise: visualizzazione interattiva delle prestazioni dei modelliSalve utenti JMP e team JMP,
Mi è venuta una vecchia idea guardando la "cronologia divisa" visiva dalla piattaforma Decision Tree (vedi immagine "Split_history" allegata) e pensando a questa visualizzazione per i modelli DoE creati dalle piattaforme "Fit Model" o "Fit Stepwise".
Sarebbe possibile e fattibile aggiungere in queste piattaforme (o in una di queste piattaforme) un grafico simile che mostri l'evoluzione delle metriche dei diversi modelli (come R², R² aggiustato, RMSE, valore p del modello, ... forse per essere scelto/selezionato dall'utente) per aiutare l'utente a definire il miglior modello possibile (magari come un'opzione nel triangolo rosso come "Dividi cronologia")?
Potrebbe essere una sorta di grafico, che si aggiorna ogni volta che l'utente elimina un termine dal modello o ne aggiunge uno, e che mostra il risultato di questo passaggio su metriche diverse rispetto ai modelli/passaggi precedenti, in modo che l'utente abbia una visione panoramica su quanto grande potrebbe essere il cambiamento per il modello a seconda del termine rimosso/aggiunto (vedere ad esempio l'immagine "DoE-Model_selection-help").
Forse questa idea sarebbe più semplice da implementare sulla piattaforma Fit Stepwise, poiché questa piattaforma mostra già la cronologia dei passi e le varie metriche collegate a ciascun modello (vedi immagine "DoE-Stepwise").
Condivido con voi un datatable con un esempio di DoE, con vari livelli di rumore sulla risposta. Nei vari script "Parametri e selezione dei modelli di tabella...", ho salvato le diverse metriche per ogni passaggio del modello e ho creato un profiler con varie funzioni e desiderabilità (R², R² PRESS, RMSE, ecc...). L'obiettivo era utilizzare il profiler per trovare il miglior passaggio possibile del modello.
Spero che questo non sembri troppo folle o troppo complesso, poiché vedo questa nuova funzionalità come una buona opportunità per i creatori di modelli di vedere rapidamente come i termini influiscono sui loro modelli in modo semplice. La piattaforma di regressione generalizzata ha anche una visualizzazione simile ("Percorso della soluzione") che aiuta molto a decidere sul modello.
Mi interesserebbe avere qualche feedback in merito,
Esplorazione e visualizzazione dei datiProgettazione di esperimentiRe: DoE/Fit Model/Stepwise: Visualizzazione interattiva delle prestazioni dei modelli - Stato cambiato in: RiconosciutoCiao @Victor_G , Grazie per il tuo suggerimento! Abbiamo acquisito la tua richiesta e la prenderemo in considerazione.
Re: DoE/Fit Model/Stepwise: Visualizzazione interattiva delle prestazioni dei modelli - Stato cambiato in: IndagineCiao @Victor_G , grazie per questo suggerimento: vedo molto valore in questo.
C'è una variante disponibile in Stepwise, ma i grafici non sono così eleganti come il percorso della soluzione o la cronologia divisa e non sono interattivi. Discuteremo con il nostro team di sviluppo.
Saluti Mia
Re: DoE/Fit Model/Stepwise: visualizzazione interattiva delle prestazioni dei modelliGrazie @mia_stephens per il feedback!
Penso che la visualizzazione e l'interattività sarebbero aspetti chiave qui, in modo che gli utenti possano davvero esplorare i diversi modelli (attraverso diverse metriche) e comprendere/visualizzare meglio le situazioni di underfitting o overfitting.
Re: DoE/Fit Model/Stepwise: Visualizzazione interattiva delle prestazioni dei modelli - Stato modificato in: Riconosciuto
