Sto eseguendo una procedura graduale e valutando le prestazioni utilizzando un k-fold r-squared. Attualmente, l'unico k-fold r-square fornito è la media di tutte e 5 le pieghe. È possibile fissare la r-squared per ogni singola piega a k in un modello?
Ciao @brown1 ,
Per vedere i singoli risultati per ogni piega, puoi provare ad utilizzare invece la piattaforma "Model Screening" ("Analyze", "Predictive Modeling", "Model Screening").
Inserirai i tuoi fattori e le tue risposte, controllerai la "convalida incrociata K-fold", specificherai il numero di pieghe e controllerai semplicemente "Adatta per gradi" nel menu "Metodi".
Quindi, dovresti avere i risultati delle tue pieghe individuali per l'allenamento e la convalida come in questo screenshot:
Fai attenzione a non fare "cherry picking" e scegli di utilizzare la piega con i migliori risultati, poiché significherà che stai scegliendo il set di allenamento e validazione per ottenere i migliori risultati, che non è l'obiettivo di questa tecnica di validazione ( e non l'obiettivo di una convalida). Serve più per valutare la robustezza di un modello nel contesto di un piccolo set di dati, in cui nessun dato viene "perso" o escluso nel set di convalida.
È possibile trovare ulteriori informazioni sulla convalida incrociata e sulla valutazione del modello in questa discussione: Risolto: quanto è valida la convalida incrociata K-fold per piccoli set di dati? - Comunità di utenti JMP
Spero che ti aiuterà,
