Ich führe ein schrittweises Verfahren durch und bewerte die Leistung mit einem k-fachen r-Quadrat. Derzeit wird das einzige k-fache r-Quadrat, das bereitgestellt wird, über alle 5 Falten gemittelt. Ist es möglich, das r-Quadrat für jede einzelne k-Falte in einem Modell zu sichern?
Hallo @brown1 ,
Um die einzelnen Ergebnisse für jede Faltung zu sehen, können Sie stattdessen versuchen, die Plattform "Model Screening" ("Analyze", "Predictive Modeling", "Model Screening") zu verwenden.
Sie geben Ihre Faktoren und Antwort(en) ein, überprüfen die „K-fache Kreuzvalidierung“, geben die Anzahl der Faltungen an und überprüfen einfach „Schrittweise anpassen“ im Menü „Methoden“.
Dann sollten Sie Ihre individuellen Faltenergebnisse für das Training und die Validierung haben, wie in diesem Screenshot:
Achten Sie darauf, kein "Rosinenpicken" zu betreiben und wählen Sie die Faltung mit den besten Ergebnissen, da dies bedeutet, dass Sie das Trainings- und Validierungsset auswählen, um die besten Ergebnisse zu erzielen, was nicht das Ziel dieser Validierungstechnik ist ( und überhaupt nicht das Ziel einer Validierung). Es dient eher der Bewertung der Robustheit eines Modells im Kontext eines kleinen Datensatzes, bei dem keine Daten "verloren gehen" oder im Validierungssatz ausgeschlossen werden.
Weitere Informationen zur Kreuzvalidierung und Modellbewertung finden Sie in dieser Diskussion: Gelöst: Wie gut ist die K-fache Kreuzvalidierung für kleine Datensätze? - JMP-Benutzergemeinschaft
Ich hoffe es hilft dir,
