Esploratore dati funzionale con colonna di convalidaHo un set di dati con 40 spettri NIR con righe come funzioni. Il set di dati è suddiviso in un set di training e uno di validazione usando una colonna di validazione del punto di taglio; le ultime 10 righe sono di validazione.
Eseguendo l'analisi FPCA, solo il set di training viene adattato come mostrato di seguito? Come facciamo a sapere se l'adattamento del set di convalida è OK utilizzando il modello di training?
Nessun adattamento per il set di convalida?
Immagino anche che il grafico diagnostico sia valido solo per il set di addestramento?
Punteggi FPCA: i risultati per il set di convalida vengono calcolati con il modello di addestramento?
Grazie per il contributo!
Modellazione statistica avanzataModellazione predittiva e apprendimento automaticoFinestreRe: Functional Data Explorer con colonna di convalidaAncora una volta ottima risposta, grazie Victor!
Re: Functional Data Explorer con colonna di convalidaCiao @frankderuyck ,
Sono d'accordo, la documentazione sull'uso del set di convalida per Functional Data Explorer è un po' confusa per quanto riguarda i termini e l'uso dei set: Avvia la piattaforma Functional Data Explorer (jmp.com)
In Functional Data Explorer vengono utilizzati solo due set possibili (a differenza di altri algoritmi di Machine Learning che possono utilizzare 3 set: set di addestramento, set di convalida e set di test): set di addestramento (codificato come 0 o il valore più piccolo) e set di convalida (codificato come 1 o valori superiori).
Il set di convalida è infatti utilizzato qui come set di test (se utilizziamo rigorosamente la giusta convenzione di denominazione): non è utilizzato per adattare un modello funzionale, ma è possibile estrarre i punteggi FPCA di questo set per vedere quanto è efficace l'adattamento del modello su nuovi dati funzionali: Risolto: Analisi e classificazione dei dati funzionali: come calcolare l'FPC di nuovi dati (u... - JMP User Community
Il set di addestramento viene utilizzato per adattare e valutare l'adattamento del modello, e tutti i grafici nel report che hai menzionato sono realizzati sul set di addestramento.
È possibile valutare l'adattamento del modello ai dati di convalida estraendo la formula di previsione sulla nuova tabella dati (triangolo rosso accanto a "[Modello] su [Dati iniziali]" e "Salva dati"). Vengono aggiunte colonne di formula (Previsione e Residui) e utilizzando Graph Builder è possibile visualizzare l'Effettivo rispetto al Previsto dei dati di convalida o visualizzare i residui per riprodurre i risultati visualizzati nel report:
Ma sono d'accordo con te, avere i risultati sui dati di convalida direttamente sulla piattaforma sarebbe molto più semplice. Potrebbe essere una buona idea aggiungerla alla JMP Wish List se non è già stata scritta.
Spero che questa risposta ti aiuti,
