Esplora dati funzionale con colonna di convalidaHo un set di dati con 40 spettri NIR con righe come funzioni. Il set di dati è suddiviso in un set di training e convalida utilizzando una colonna di convalida del punto di interruzione; Le ultime 10 righe sono di convalida.
Si esegue l'analisi FPCA solo se il set di addestramento è montato come mostrato di seguito? Come facciamo a sapere se l'adattamento del set di valutazione è corretto utilizzando il modello di addestramento?
Nessun adattamento per il set di convalida?
Presumo che anche il grafico diagnostico sia solo per il set di addestramento?
Punteggi FPCA: i risultati per il set di validazione vengono calcolati con il modello di training?
Grazie per il contributo!
Modellazione statistica avanzataModellazione predittiva e machine learningfinestreRi: Esplora dati funzionali con colonna di convalidaCiao @frankderuyck ,
Sono d'accordo, la documentazione sull'uso del set di convalida per Functional Data Explorer è un po' confusa riguardo ai termini e all'uso dei set: Avvia la piattaforma Functional Data Explorer (jmp.com)
Esistono solo due set possibili utilizzati in Functional Data Explorer (a differenza di altri algoritmi di Machine Learning che possono utilizzare 3 set: set di training, validazione e test): set di training (codificato come 0 o il valore più piccolo) e set di convalida (codificato come 1 o valori più alti).
Il set di validazione viene infatti utilizzato qui come set di test (se usiamo rigorosamente la giusta convenzione di denominazione): non viene utilizzato per adattare un modello funzionale, ma è possibile estrarre i punteggi FPCA di questo set per vedere quanto è efficace il modello adattarsi a nuovi dati funzionali: Risolto: Analisi e classificazione dei dati funzionali: come calcolare l'FPC di nuovi dati (u... - JMP User Community
Il set di addestramento viene utilizzato per adattare e valutare l'adattamento del modello e tutti i grafici nel report menzionato vengono eseguiti sul set di addestramento.
È possibile valutare l'adattamento del modello ai dati di convalida estraendo la formula di previsione sulla nuova tabella dati (triangolo rosso accanto a "[Modello] su [Dati iniziali]" e "Salva dati"). Vengono aggiunte le colonne della formula (Previsione e Residui) e utilizzando il Costruttore di grafici è possibile visualizzare il confronto tra Effettivo e Previsto dei dati di convalida o visualizzare i residui per riprodurre i risultati visualizzati nel report:
Ma sono d’accordo con te, avere i risultati sui dati di validazione direttamente sulla piattaforma sarebbe molto più semplice. Potrebbe essere una buona idea aggiungerla alla lista dei desideri di JMP se non è già stata scritta.
Spero che questa risposta ti possa aiutare,
Ri: Esplora dati funzionali con colonna di convalidaOttima risposta ancora una volta, grazie Victor!
