Se non hai mai a che fare con dati mancanti, per favore conta le tue benedizioni - niente da vedere qui oggi! Tuttavia, per quelli di noi che non sono così fortunati, ho delle buone notizie: in primo luogo, per tutto il JMP 11, abbiamo aggiunto funzionalità per gestire i dati mancanti. La piattaforma Crescita dell'affidabilità ora gestisce i dati mancanti. E in JMP Pro, la piattaforma Partition e la maggior parte delle personalità del Fit Model ora dispongono di un'opzione "mancante informativo", mentre i minimi quadrati parziali supportano l'imputazione.
Ma - cosa succede se lo si desidera preprocess un set di dati, eseguendo le imputazioni prima di iniziare la modellazione? Per questo, ho caricato un nuovo componente aggiuntivo per lo scambio di file JMP: il Componente aggiuntivo di importazione per JMP Pro. (Il download richiede un profilo SAS gratuito.)
Il componente aggiuntivo consente di scegliere tra una varietà di statistiche e opzioni di pre-elaborazione e di eseguire imputazioni per una o più variabili, tutto in un unico passaggio. La sua interfaccia è modellata molto attentamente dopo la piattaforma di Riepilogo, quindi sarà facile da usare. Vedrò anche un esempio che illustrerà come utilizzare il componente aggiuntivo e spiegarne l'output.
L'esempio userà il " Dati fisici auto mancanti. Jmp "Set di dati. Questo set di dati è stato formato cancellando alcuni dei dati dal " Car Physical Data.jmp "Set di dati incluso nei file di esempio in JMP. L'ho messo nel dati di esempio sezione dello scambio di file nel caso in cui si desideri lavorare con questi esempi.
Dopo aver aperto il file e usando il Viewer colonne (una grande nuova piattaforma in JMP 11 - provalo!), vediamo che ogni colonna manca di dati:
In questo esempio, raggrupperemo per Nazione , imputazione per il Spostamento variabile in tre modi diversi:
SignificareMedia ritagliataLimite superiore di confidenza del 95% per la mediaImputare il significato Spostamento , raggruppando per Nazione , abbiamo lanciato Nazione nel Gruppo ruolo, quindi selezionare Spostamento e scegliere Significare dal menu a discesa:
Dopo averlo fatto, il pannello accanto al menu a discesa verrà popolato con la tua scelta:
Per imputare la media ritagliata,
Seleziona " tagliare " dal Trim / Winsorize cadere in picchiata.Scegli il livello di ritaglio. Qui abbiamo tagliato un totale del 20% dei dati (cioè, verrà utilizzato l'80% centrale dei dati) inserendo un valore di 0.20.Selezionare Spostamento nel menu colonne e scegli " Significare " dal Metodo di imputazione cadere in picchiata.Notare che T [0.2] -> appare prima del testo Mean (Spostamento), per indicare che i dati riceveranno un trim del pre-processing del 20% prima di calcolare la media.
Per imputare il limite superiore di confidenza del 95% per la media,
Per prima cosa, seleziona " No "Dal menu a discesa Trim / Winsorize. In caso contrario, i dati verranno ritagliati come una fase di pre-elaborazione.Quindi, assicurarsi di inserire 0.95 nel file Confidenza CI scatola.Selezionare Spostamento nel menu colonne e scegli " Media CI superiore " dal Metodo di imputazione cadere in picchiata.
Fare clic su OK per procedere con l'imputazione.
Vengono prodotti due tavoli. La prima è una tabella di riepilogo, che elenca i valori che verranno imputati, per livello di raggruppamento:
La tabella successiva è una copia della tabella originale, con colonne aggiuntive dell'imputazione. Le colonne di imputazione sono raggruppate con la colonna originale per un facile riferimento. Qui, vediamo che sono state create quattro nuove colonne:
Una colonna di indicatori, Impute_Flag (spostamento), impostato su 1 se è stata eseguita l'imputazione (ovvero se il valore era mancante nei dati originali) e 0 in caso contrario.Una colonna per ciascuno dei tre metodi di imputazione che abbiamo richiesto.
Utilizzando la piattaforma Columns Viewer su questa nuova tabella, vediamo che, come previsto, le 3 colonne imputate non contengono valori mancanti:
Ispezionando ulteriormente le nuove colonne, vediamo che quando il flag di imputazione è 0, viene utilizzato il valore originale. Quando il flag di imputazione è 1, inseriamo la statistica appropriata (per livello di gruppo, se è stato utilizzato il raggruppamento):
Le colonne sono basate su una formula, quindi se modifichi il valore di Nazione in una data riga, o eliminare (o inserire) il Spostamento in una data riga, i flag e i valori imputati si aggiornano automaticamente. Ciò consente a queste colonne di essere utilizzate in modo intelligente dalle formule di previsione prodotte dalle piattaforme di modellazione.
Il componente aggiuntivo dispone anche di pulsanti di aiuto per facilitare l'avvio: fare clic su uno dei pulsanti "?" Per accedere al testo della guida.
Puoi scarica questo componente aggiuntivo (e molti altri) gratuitamente al Scambio file JMP . (È richiesto un profilo SAS gratuito.)
Felice imputazione!
Brady Brady ha scritto:
Ciao Ursula,
Abbiamo già visto questo problema, anche se non siamo sicuri del motivo. Se stai usando Windows (non abbiamo sentito parlare di ciò che accade con i Mac), ecco la soluzione:
1. Scarica il file; dal tuo post sembra che tu abbia già fatto questo.
2. Trova il file usando Windows Explorer, ma non estrai il file .zip - lascialo intatto.
3. Nelle impostazioni di Windows Explorer, assicurarsi che la casella per "Nascondi le estensioni dei tipi di file conosciuti" NON sia selezionata.
4. Rinominare il file in modo che l'estensione non sia più .zip, ma .jmpaddin (Nota, se non hai eseguito il passaggio 3, il file apparirà APPEAR con estensione .jmpaddin, ma in realtà avrà un'estensione di.jmpaddin.zip, quindi il tuo problema persisterà).
5. Fai doppio clic sul file o aprilo da JMP.
Questo dovrebbe farlo - buona fortuna!
Brady
Ursula Garczarek ha scritto:
Caro Brady, mi piacerebbe molto usare lo strumento, ma mi sembra di perdere un'informazione molto importante: quando scarico il file, si presenta come .zip, che contiene tre file, uno dei quali è un .jsl che editted è in qualche modo linguaggio macchina. Ho provato a rinominare .zip .addin e cose del genere, ma non funziona. Potete inviarmi un collegamento alle istruzioni su come posso installare questo add-in? Cordiali saluti,
Ursula
