come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)Come posso identificare quali righe (osservazioni) sono i miei punti di convalida quando la mia variabile di destinazione è variabile di categoria quando uso selezioni casuali? come ad esempio da https://www.jmp.com/support/help/14/example-of-profit-matrix-and-decision-matrix-rep.shtml#1276835 So che per la variabile target continua, potrei selezionare le righe da predire rispetto al grafico reale per sapere quali osservazioni sono etichettate come dati di validazione / addestramento. ma non ho trovato questo per variabile target categoriale. GrazieRi: come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)Peter e Jeff,
Grazie a tutti per le risposte e le soluzioni.
Ho usato e capito le funzionalità che hai citato.
Mi chiedevo solo come JMP dividesse i dati in modo casuale (nel modello di foresta casuale, albero potenziato ecc.) E dalla divisione casuale di JMP, potrei identificare le righe / osservazioni come Formazione / Convalida per la variabile di destinazione categoriale.
dal post di Jeff, sembra che JMP non abbia un modo per identificarli.
Ri: come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)L'altra cosa che suggerirò è se si dispone di una risposta categorica, una best practice generale per creare la colonna Validation nella funzionalità Make Validation Column di JMP Pro è selezionare l'opzione Stratified Random cerchiata in basso, quindi selezionare la variabile target. Ciò imporrà la percentuale di randomizzazione che scegli di applicare a ciascun livello della variabile categoriale ... che aiuta a prevenire il bias del modello.
Ri: come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)Stai utilizzando l'opzione "Parte convalida" nella finestra di dialogo di avvio della partizione.
Sfortunatamente, non vedo un modo per identificare quali file vengono utilizzate per la convalida con questo metodo.
Se hai JMP Pro, sono d'accordo @Peter_Bartell . Puoi creare una colonna di convalida per specificare quali righe vengono utilizzate per la convalida.
Ri: come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)Penso di vedere cosa stai facendo ... ma non ne sono sicuro al 100%. Sembra che potresti selezionare la% di convalida dal lancio del dialogo della piattaforma di modellazione? Quello che sto suggerendo è PRIMA di modellare, usando la capacità di Make Validation Column di JMP Pro, creare una colonna nella tabella dei dati i cui valori di riga saranno training, validazione e, facoltativamente, test. Quindi all'interno della finestra di avvio del modello è sufficiente posizionare il nome della colonna di convalida nel ruolo di convalida e quindi eseguire la piattaforma come si farebbe normalmente. Vedi la tabella dei dati di esempio allegata per quello che sto suggerendo ... Non ho incluso le colonne delle variabili predittive ma mostra ciò che stavo suggerendo nella mia prima risposta.
Ri: come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)Peter,
Grazie per la tua risposta. Ma " l'altro la colonna di convalida "non può essere trovata nei dati o nei risultati quando è suddivisa in modo casuale per variabile categoriale. Le selezioni di riga possono essere utilizzate solo per variabili target numeriche quando il risultato mostra il grafico di actural vs predicted (evidenziando i punti di dati dal grafico). Ma per la variabile target categoriale, i risultati hanno ROC, Matrix ecc. E non sono stato in grado di identificare quali righe provengono dalla parte di convalida, quali righe provengono da parti di formazione ...
Ri: come sapere quali file sono i miei set di dati di convalida quando eseguo il modello con split casuale (JMP PRO)In cima alla mia testa, un modo visivo e interattivo per determinare quali righe si trovano in una delle tre potenziali categorie di colonne a colonna variabile di convalida consiste nell'utilizzare la piattaforma di distribuzione per creare due distribuzioni. Una distribuzione è la variabile di destinazione, l'altra la colonna di convalida. Quindi è sufficiente fare clic su ciascuna barra nel diagramma di distribuzione della colonna Validazione, osservando le modifiche che si verificano nella tabella dei dati e le distribuzioni delle variabili di destinazione. Altri metodi potrebbero essere applicati come usare la selezione riga ... ma preferisco sempre i metodi visivi non visivi.
