Ho un file CSV di grandi dimensioni contenente> 50 milioni di righe di dati per tutti i 50 stati degli Stati Uniti. Come posso importare solo una parte dei dati in JMP (ad esempio, solo i dati per la California)?
Un modo per farlo è aprire il file cvs in JMP e quindi filtrare i dati per la California, ma questo richiede un'eternità. Quindi mi chiedevo se esiste un modo per filtrare i dati * prima* importarlo in JMP? Immagino che questo possa essere fatto con il generatore di query (giusto?) Ma può essere fatto su un file csv? Si prega di avvisare.
Prova l'importazione di più file se noti che l'importazione CSV è lenta. Non risolverà il problema del filtro, ma potrebbe essere un po 'più veloce, anche con un solo file. Il filtraggio dovrebbe essere abbastanza veloce una volta caricati i dati.
In alternativa, conserva lo script sorgente dall'importazione CSV e utilizza lo script la prossima volta. L'importazione CSV (a differenza dell'importazione di più file) effettua un passaggio aggiuntivo sui dati per scoprire quali colonne sono caratteri e numeriche. Con lo script sorgente, non è necessario eseguire il passaggio aggiuntivo.
Inoltre, se la tabella dei dati è troppo grande per contenere la memoria (8 GB? 16 GB?), Sarà lenta e aumentare la memoria potrebbe essere la scelta migliore. Se hai una spia del disco, tienila d'occhio o usa il task manager, ecc. Per vedere se il disco è occupato al 100%.
