Utilizzare per suddividere i dati in un set utilizzato per costruire un modello (addestramento) e un set utilizzato per valutare le prestazioni predittive di un modello (validazione). Se vengono adattati più modelli, spesso viene scelto quello con le prestazioni migliori sui dati di convalida. Talvolta, viene utilizzato un terzo set (test) per valutare le prestazioni predittive del modello scelto su nuovi dati. Questo è considerato un metodo più accurato per valutare le prestazioni future di un modello, poiché il set di test non è stato utilizzato né nella costruzione del modello né nel processo di selezione. L'utilizzo di una colonna di convalida è particolarmente utile nella costruzione di modelli che tendono a sovraadattare i dati. Alcune piattaforme di modellazione in JMP offrono la possibilità di specificare la parte di convalida durante l'adattamento del modello, pertanto la creazione di una colonna di convalida non è necessaria.
Creazione di una colonna di convalida (addestramento, convalida, test) in JMP Pro
- Da una tabella dati JMP aperta, seleziona Analizza > Modellazione predittiva > Crea colonna di convalida .
- È possibile utilizzare le colonne Stratificazione, Raggruppamento e Punto di taglio per personalizzare il partizionamento. Se si desidera una colonna di convalida semplice, fare clic su OK .
- Nella finestra risultante, immettere i valori (conteggi o proporzioni) che indicano come i dati verranno assegnati ai set di training, validation e test. Scegliere un Random Seed per riprodurre la stessa assegnazione casuale, se desiderato. Fare clic su OK. Viene creata una nuova colonna, popolata con i valori 0, 1 e 2 nelle proporzioni (o conteggi) specificate.
• 3.576 (60%) delle osservazioni (set di addestramento) saranno utilizzate per costruire (addestrare) il modello.
• 1.758 (30%) delle osservazioni (set di convalida) saranno utilizzate per convalidare e selezionare il modello migliore.
• 596 (10%) delle osservazioni (set di test) saranno utilizzate per testare le prestazioni del modello scelto su nuovi dati.
Creazione di una colonna di convalida in JMP
- Da una tabella dati JMP aperta, selezionare Nuova colonna dal menu Colonne .
- Nella finestra Nuova colonna risultante, modificare il Nome colonna in Convalida .
- Accanto a Inizializza dati , fare clic sulla freccia e selezionare Casuale .
- Seleziona "Indicatore casuale" . Digita le proporzioni desiderate. Qui abbiamo scelto 50% 0 (addestramento), 30% 1 (validazione) e 20% 2 (test).
- Per visualizzare le etichette Train, Validate e Test anziché 0, 1 e 2, fare clic con il pulsante destro del mouse sulla colonna e selezionare Proprietà colonna > Etichette valore . Immettere il valore e l' etichetta desiderata e fare clic su Aggiungi un valore alla volta.
- Fare clic su Applica per visualizzare la nuova colonna nella tabella dati (per verificare che la colonna venga creata come desiderato). Quindi fare clic su OK per creare la colonna.
Per saperne di più, visita Modelli predittivi e specializzati > Crea colonna di convalida nella Guida di JMP .
