Woher weiß ich, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Wie kann ich identifizieren, welche Zeilen (Beobachtungen) meine Validierungspunkte sind, wenn meine Zielvariable eine Kategorievariable ist, wenn ich Zufallsauswahlen verwende? wie zum Beispiel aus https://www.jmp.com/support/help/14/example-of-profit-matrix-and-decision-matrix-rep.shtml#1276835 Ich weiß, dass ich für eine kontinuierliche Zielvariable Zeilen aus dem Vorhersage-gegen-Ist-Diagramm auswählen könnte, um zu wissen, welche Beobachtungen als Validierungs-/Trainingsdaten gekennzeichnet sind. aber ich konnte dies für die kategoriale Zielvariable nicht finden. DankeBetreff: Wie kann ich feststellen, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Peter und Jeff,
Danke an alle für die Antworten und Lösungen.
Ich habe die von Ihnen erwähnten Funktionen verwendet und verstanden.
Ich frage mich nur, wie JMP Daten zufällig aufteilte (im Modell von Random Forest, Boosted Tree usw.) und aus der Aufteilung von JMP Random konnte ich Zeilen/Beobachtungen als Training/Validierung für kategoriale Zielvariable identifizieren.
Aus Jeffs Post sieht es so aus, als hätte JMP keine Möglichkeit, sie zu identifizieren.
Betreff: Wie kann ich feststellen, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Die andere Sache, die ich vorschlagen werde, ist, wenn Sie eine kategorische Antwort haben, eine allgemeine bewährte Methode zum Erstellen der Validierungsspalte in der Funktion "Validierungsspalte erstellen" von JMP Pro ist, die unten eingekreiste Option Stratified Random auszuwählen und dann Ihre Zielvariable auszuwählen. Dadurch wird der von Ihnen gewählte Randomisierungsprozentsatz erzwungen, der auf jede Ebene der kategorialen Variablen angewendet wird ... was dazu beiträgt, Modellverzerrungen zu vermeiden.
Betreff: Wie kann ich feststellen, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Sie verwenden die Option „Validierungsteil“ im Dialogfeld „Partition starten“.
Leider sehe ich keine Möglichkeit, mit dieser Methode zu identifizieren, welche Zeilen für die Validierung verwendet werden.
Wenn Sie JMP Pro haben, stimme ich dem zu @Peter_Bartell . Du kannst Erstellen Sie eine Validierungsspalte um anzugeben, welche Zeilen für die Validierung verwendet werden.
Betreff: Wie kann ich feststellen, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Ich glaube, ich verstehe, was du tust ... aber ich bin mir nicht 100 % sicher. Es hört sich so an, als würden Sie die Validierung % aus dem Dialogstart der Modellierungsplattform auswählen? Was ich vorschlage, ist, VOR dem Modellieren mit der Funktion Make Validation Column von JMP Pro eine Spalte in der Datentabelle zu erstellen, deren Zeilenwerte Training, Validierung und optional Test sind. Platzieren Sie dann im Modellstartfenster einfach den Namen der Validierungsspalte in der Validierungsrolle und führen Sie die Plattform dann wie gewohnt aus. Sehen Sie sich die beigefügte Beispieldatentabelle für das an, was ich vorschlage ... Ich habe keine Prädiktorvariablenspalten eingefügt, aber es zeigt, was ich in meiner ersten Antwort vorgeschlagen habe.
Betreff: Wie kann ich feststellen, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Peter,
Danke für deine Antwort. Aber " die andere die Validierungsspalte" konnte in den Daten oder im Ergebnis nicht gefunden werden, wenn sie für kategoriale Variablen zufällig aufgeteilt wurde.Zeilenauswahlen können nur für numerische Zielvariablen verwendet werden, wenn das Ergebnis einen Plot von tatsächlichen vs. vorhergesagten Werten zeigt (durch Hervorheben von Datenpunkten aus dem Plot). Aber für die kategoriale Zielvariable haben die Ergebnisse ROC, Matrix usw., und ich konnte nicht identifizieren, welche Zeilen aus dem Validierungsteil stammen, welche Zeilen aus Trainingsteilen stammen ...
Betreff: Wie kann ich feststellen, welche Zeilen mein Validierungsdatensatz sind, wenn ich ein Modell mit zufälliger Aufteilung ausführe (JMP PRO)Aus dem Kopf heraus besteht eine visuelle und interaktive Möglichkeit, um zu bestimmen, welche Zeilen in einer der drei potenziellen Variablenzeilenkategorien der Validierungsspalte enthalten sind, darin, die Verteilungsplattform zu verwenden, um zwei Verteilungen zu erstellen. Eine Verteilung ist Ihre Zielvariable, die andere die Validierungsspalte. Dann können Sie einfach auf jeden Balken im Verteilungsdiagramm der Spalte Validierung klicken und die in der Datentabelle auftretenden Änderungen sowie die Verteilungen der Zielvariablen beobachten. Andere Methoden könnten auch angewendet werden, wie die Verwendung der Zeilenauswahl ... aber ich bevorzuge immer die visuellen gegenüber nicht visuellen Methoden.
