Importieren Sie nur einen Teil einer großen CSV-Datei in JMPIch habe eine große CSV-Datei mit> 50 Millionen Datenzeilen für alle 50 Bundesstaaten der USA. Wie kann ich nur einen Teil der Daten in JMP importieren (z. B. Daten nur für Kalifornien)?
Eine Möglichkeit besteht darin, die cvs-Datei in JMP zu öffnen und dann die Daten für Kalifornien herauszufiltern. Dies dauert jedoch ewig. Ich habe mich gefragt, ob es eine Möglichkeit gibt, die Daten zu filtern * Vor* in JMP importieren? Ich denke, dies kann mit dem Abfrage-Generator durchgeführt werden (richtig?), Aber kann dies mit einer CSV-Datei durchgeführt werden? Bitte beraten.
DatentabelleBetreff: Importieren Sie nur einen Teil einer großen CSV-Datei in JMPProbieren Sie den Import mehrerer Dateien aus, wenn der CSV-Import langsam ist. Das Filterproblem wird dadurch nicht gelöst, aber es kann sogar mit nur einer Datei erheblich schneller sein. Die Filterung sollte nach dem Laden der Daten recht schnell sein.
Oder behalten Sie das Quellenskript aus dem CSV-Import bei und verwenden Sie das Skript beim nächsten Mal. Beim CSV-Import (im Gegensatz zum Import mehrerer Dateien) werden die Daten zusätzlich durchlaufen, um festzustellen, welche Spalten zeichen- und numerisch sind. Mit dem Quellenskript muss der zusätzliche Durchgang nicht durchgeführt werden.
Wenn die Datentabelle zu groß ist, um in den Speicher zu passen (8 GB? 16 GB?), Wird sie langsam und die Erhöhung des Speichers ist möglicherweise die beste Wahl. Wenn Sie eine Festplattenanzeige haben, behalten Sie diese im Auge oder verwenden Sie den Task-Manager usw., um festzustellen, ob die Festplatte zu 100% ausgelastet ist.