<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />JMP kann an Datentabellen arbeiten, die etwa halb so groß sind wie der gesamte physische Arbeitsspeicher der Maschine. Eine 16-GB-Maschine kann also eine Datentabelle mit einer 8-GB-Datentabelle und eine 8-GB-Maschine mit einer 4-GB-Datentabelle behandeln.
Diese Richtlinie bedeutet, dass JMP in der Lage sein sollte, eine Datentabelle dieser Größe zu öffnen und einfache und grundlegende Analysen daran vorzunehmen. Es gibt viele Analysen, Tabellenmanipulationen und Modellierungsplattformen, die abhängig von den Optionen und den verwendeten Daten erhebliche Speichermengen erfordern. Wir können nicht versprechen, dass jede Analyse oder Operation mit Datentabellen dieser Größe durchgeführt werden kann.
Die beste Schätzung der Größe einer Datentabelle ist die (unkomprimierte) Größe auf der Festplatte. Die Größe der Daten im Textformat (z. B. .csv, .txt) ist ebenfalls ein sinnvoller Ersatz.
Wir können keine Anleitung dazu geben, wie viele Zeilen oder Spalten JMP verarbeiten kann, da dies stark von der Kombination der beiden und den gespeicherten Datentypen abhängt.
Es gibt zwei verschiedene Arten der "Komprimierung" für JMP-Datentabellen.
Ausgewählte Spalten komprimieren
a) Wählen Sie die Spalten aus, die betroffen sein sollen
b) Cols -> Ausgewählte Spalten komprimieren
Diese Option:
• fügt der Zeichenspalte eine Listenprüfung (Standardreihenfolge) hinzu, wenn die Spalte weniger als 255 verschiedene Werte hat.
• ändert numerische Spalten in die kleinste 1-Byte-, 2-Byte- oder 4-Byte-Ganzzahl, wenn alle Werte in der Spalte gespeichert werden können. Es werden nur ganzzahlige Spalten geprüft.
• Bei einer 1-Byte-Ganzzahl liegt der Zahlenbereich, den Sie speichern können, zwischen -126 und 127.
• Bei einer 2-Byte-Ganzzahl liegt der Zahlenbereich, den Sie speichern können, zwischen -32,766 und 32,767.
• Bei einer 4-Byte-Ganzzahl liegt der Zahlenbereich, den Sie speichern können, zwischen -2.147.483.646 und 2.147.483.647.
• Die Spalten werden nicht geändert, wenn bereits eine Listenprüfung vorliegt.
Diese Option wirkt sich auf die Speicherkapazität aus, die zum Speichern einer Datentabelle im Arbeitsspeicher erforderlich ist. Daher kann JMP mit mehr Daten arbeiten.
Tabellen komprimieren
a) Stellen Sie die Option "Datei komprimieren, wenn gespeichert" im roten Dreieckmenü der Datentabelle ein.
Diese Option verwendet die GZ-Komprimierung, um die Datei nur auf der Festplatte zu verkleinern. Die Daten werden unkomprimiert im Speicher abgelegt.
Jeff Perkinson
JMP Customer Care Manager
SAS Institute Inc.
SAS-Campus-Laufwerk • Cary, North Carolina 27513 • USA
Ph: 919-531-6521
Email: Jeff.Perkinson@jmp.com <> Jeff.Perkinson@jmp.com >
Aktie. Fragen. Lernen. Verbinden. - community.jmp.com < https://community.jmp.com >
Verbinden Sie sich mit mir in der JMP User Community < https://community.jmp.com/people/jeff.perkinson >.
Am 17. Juli 2016, um 8:12 Uhr, ist Chuck Boiler < Chuck.Boiler@jmp.com <> Chuck.Boiler@jmp.com >> schrieb:
Hi Jeff. Ich frage mich, ob Ihre Gruppe in diesem Bereich eine Dokumentation erstellt hat? Ich hoffe, Sie in dieser Woche zu sehen. Wenn Sie Zugang zu diesen Inhalten haben, können wir darüber sprechen? Segen eines Wochenendes sei auf euch. . Futter
Gesendet von meinem iPhone, manchmal mit Sprachausgabe. Bitte entschuldigen Sie Fehler.
Nachricht weiterleiten:
Von: Chuck Boiler < Chuck.Boiler@jmp.com <> Chuck.Boiler@jmp.com >>
Datum: 17. Juli 2016 um 05:08:55 Uhr PDT
An: Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >>
Cc: Louis Valente < Louis.Valente@jmp.com <> Louis.Valente@jmp.com >>
Betreff: Re: Wie groß ist die maximale Datensatzgröße, die JMP (effizient) verarbeiten wird, wenn die MacBook Pro-Spezifikationen maximal ausgenutzt werden?
Vielen Dank, Laura. Ich wette, wir können jemanden finden, der Daten zu diesem Thema in Cary hat. Lass uns diese Woche darüber reden. Sichere Reisen. Futter
Gesendet von meinem iPhone, manchmal mit Sprachausgabe. Bitte entschuldigen Sie Fehler.
Am 16. Juli 2016, um 12:03 Uhr, Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >> schrieb:
Ich brauche dabei Hilfe. Wir müssen ein Dokument für das XXXXX-Management erstellen. Ich kann nächste Woche mehr erklären. Ich möchte das einfach auf das Radar bringen. Vielleicht hat einer von euch sowas schon gemacht?
Laura.Higgins@JMP.com <> Laura.Higgins@jmp.com > während Sie mobil sind
Nachricht weiterleiten:
Von:
Datum: 15. Juli 2016 um 18:39:23 Uhr PDT
An: Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >>
Betreff: Re: Wie groß ist die maximale Datensatzgröße, die JMP (effizient) verarbeiten wird, wenn die MacBook Pro-Spezifikationen maximal ausgenutzt werden?
Danke für diese Laura, ich bin gerade in China - also werde ich mich in ein paar Wochen wieder mit dir verbinden.
Die übergeordnete Frage unserer Führung lautet im Wesentlichen: "Wann bricht JMP aufgrund der Datengröße ein" und "Was können wir tun, um die Effektivität der JMP-Analyse zu maximieren, dh Komprimierung usw."
Ich werde mit Ihnen kreisen, damit wir (entweder ich oder jemand anderes) ein Referenzdokument erstellen können, es sei denn, Sie verfügen bereits über eine solche Datei / ein solches Dokument. zu den Mannschaften drücken.
Am 16. Juli 2016 um 5:55 Uhr Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >> schrieb:
Hallo John-
Es gibt keine architektonische Beschränkung für JMP-Datentabellen für die Anzahl der Zeilen oder Spalten.
Es ist etwas schwierig, Ihre Frage zu beantworten, denn es hängt davon ab, was in den Spalten steht und welche Operation in JMP Sie ausführen.
Zahlen benötigen weniger Platz als Zeichendaten. Sie können Spalten komprimieren (nicht verwendete Bits entfernen) und auch mit komprimierten Datentabellen arbeiten. Dadurch wird die JMP-Dateigröße erheblich reduziert.
Viele Operationen sind Multithreading, um mehrere Kerne zu nutzen. Das einzige, was JMP verlangsamen wird, ist die visuelle grafische Darstellung mit Tonnen von Spalten und / oder Punkten.
Ich erstelle eine Datentabelle mit 1.000.000 Zeilen und 3600-ish-Spalten
1) Zahlen unkomprimiert = 29,13 GB;
2) Komprimierte Säulen = 3,5 GB
Das Komprimieren von Spalten spart also fast 10x Platz!
1 Lauf 16 GM-Speicher und es war langsam für das Erstellen / Speichern der JMP-Tabelle. Die Verwendung komprimierter Spalten verhalten sich wie die kleinere Datentabelle!
Auch aus der Dokumentation. Take home -> das Komprimieren von Spalten beschleunigt die Analyse; Durch das Komprimieren der Datentabelle wird die Analyse NICHT beschleunigt.
Datei beim Speichern komprimieren
Komprimiert die Datentabelle beim Speichern. Nach dem Speichern der Datentabelle wird neben dem Namen der Datentabelle im Tabellenbereich ein komprimiertes Dateisymbol angezeigt. Siehe Tabellen komprimieren < http://www.jmp.com/support/help/Edit_Data_Tables.shtml#626887 > in Daten eingeben und bearbeiten < http://www.jmp.com/support/help/Edit_Data_Tables.shtml#626887 >.
Tipp: Sie können JMP auch so konfigurieren, dass beim Speichern von Tabellen immer GZ-Komprimierung verwendet wird. Wählen Sie dazu Voreinstellungen> Allgemein> Datentabellenspalten speichern, GZ komprimiert.
Hinweis: Mit der Option Datei komprimieren beim Speichern wird nur die Dateigröße verringert. Dieser Befehl wirkt sich nicht auf den zur Analyse der Daten erforderlichen Speicher aus. Verwenden Sie Cols> Dienstprogramme> Ausgewählte Spalten komprimieren, um sowohl die Dateigröße als auch den für die Analyse erforderlichen Speicher zu reduzieren. Siehe Ausgewählte Spalten komprimieren < http://www.jmp.com/support/help/Restructure_Data.shtml#769643 > in Daten eingeben und bearbeiten < http://www.jmp.com/support/help/Restructure_Data.shtml#769643 >.
Zeichendaten sind schwerer vorherzusagen, da sie davon abhängen, was in der Spalte steht. Wenn Sie Zeichendaten komprimieren, wird sie in eine Checkliste umgewandelt (die Eingabeoptionen werden effektiv auf die vorhandenen Optionen beschränkt. Dies ist jedoch keine große Sache, wenn Sie nicht die ursprünglichen Daten ändern).
Keine kristallklare Antwort, aber hoffe, diese Info hilft!
Prost!
Laura
Laura A. Higgins, Ph.D.
JMP Sr. Systemingenieur
650.454.0633 | Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com > | #LauraHigginsPhD | www.jmp.com < http://www.jmp.com/ > | SAS Institute Inc. | San Francisco
Ich denke, das ist okay, um wörtlich zu teilen:
JMP can handle at data table about half as big as the total amount of physical memory on the machine. So, a 16GB machine can handle a data table can 8GB data table and an 8 GB machine can deal with a 4GB data table.This guideline means that JMP should be able open a data table of this size and do simple and basic analyses on it. There are many analyses, table manipulations and model building platforms that can require significant amounts of memory, depending on the options and the specific data being used. We can’t promise that every analysis or operation can be performed with data tables of this size.The best estimate of the size of a data table is its (uncompressed) size on disk. The size of the data in text (e.g. .csv, .txt) format is a reasonable surrogate also.We can’t provide guidance on how many rows or columns JMP can handle since it’s highly dependent on the combination of the two and the types of data stored.There are a two different forms of “compression” for JMP data tables.Compress Selected Columnsa) Select the columns to be affectedb) Cols -> Compress Selected ColumnsThis option:• adds a List Check (default order) to character column if the column has less than 255 distinct values.• changes numeric columns to the smallest 1-byte, 2-byte, or 4-byte integer if all values in the column can be stored. Only integer values columns are checked.• For 1-byte integer, the range of numbers that you can store is from -126 to 127.• For 2-byte integer, the range of numbers that you can store is from -32,766 to 32,767.• For 4-byte integer, the range of numbers that you can store is from -2,147,483,646 to 2,147,483,647.• It will not change the columns if they have list check already.This option affects the amount of memory required to hold a data table in memory and, therefore, can allow JMP to work with more data.Compress Tablesa) Set option, “Compress File when Saved”, from red triangle menu on data table.This option uses gz compression to make the file smaller on disk only. The data is stored uncompressed in memory.
