<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />JMP può gestire alla tabella dati circa la metà della quantità totale di memoria fisica sulla macchina. Quindi, una macchina da 16 GB può gestire una tabella di dati con una tabella di dati da 8 GB e una macchina da 8 GB può gestire una tabella di dati da 4 GB.
Questa linea guida significa che JMP dovrebbe essere in grado di aprire una tabella dati di queste dimensioni e fare analisi semplici e di base su di essa. Esistono molte analisi, manipolazioni di tabelle e piattaforme per la creazione di modelli che possono richiedere una notevole quantità di memoria, a seconda delle opzioni e dei dati specifici utilizzati. Non possiamo promettere che ogni analisi o operazione può essere eseguita con tabelle di dati di queste dimensioni.
La migliore stima della dimensione di una tabella di dati è la sua dimensione (non compressa) sul disco. Anche la dimensione dei dati nel formato di testo (ad esempio .csv, .txt) è un surrogato ragionevole.
Non siamo in grado di fornire indicazioni sul numero di righe o colonne che JMP può gestire in quanto dipende in gran parte dalla combinazione dei due tipi di dati memorizzati.
Esistono due diverse forme di "compressione" per le tabelle di dati JMP.
Comprimi colonne selezionate
a) Selezionare le colonne da influenzare
b) Cols -> Comprimi colonne selezionate
Questa opzione:
• aggiunge un controllo di lista (ordine predefinito) alla colonna di caratteri se la colonna ha meno di 255 valori distinti.
• modifica le colonne numeriche al più piccolo intero di 1 byte, 2 byte o 4 byte se tutti i valori nella colonna possono essere memorizzati. Solo le colonne dei valori interi sono selezionate.
• Per numero intero a 1 byte, l'intervallo di numeri che è possibile memorizzare è compreso tra -126 e 127.
• Per numero intero a 2 byte, l'intervallo di numeri che è possibile memorizzare è compreso tra -32.766 e 32.767.
• Per numero intero a 4 byte, l'intervallo di numeri che è possibile memorizzare va da -2.147.483.646 a 2.147.483.647.
• Non cambierà le colonne se hanno già un controllo di lista.
Questa opzione influisce sulla quantità di memoria richiesta per contenere una tabella di dati in memoria e, pertanto, può consentire a JMP di lavorare con più dati.
Comprimi le tabelle
a) Imposta l'opzione, "Comprimi file se salvati", dal menu triangolo rosso sulla tabella dati.
Questa opzione utilizza la compressione gz per rendere il file più piccolo solo sul disco. I dati sono memorizzati non compressi in memoria.
Jeff Perkinson
JMP Customer Care Manager
SAS Institute Inc.
SAS Campus Drive • Cary, North Carolina 27513 • USA
Ph: 919-531-6521
E-mail: Jeff.Perkinson@jmp.com <> Jeff.Perkinson@jmp.com >
Condividere. Chiedere. Imparare. Collegare. - community.jmp.com < https://community.jmp.com >
Connettiti con me nella Community utenti JMP < https://community.jmp.com/people/jeff.perkinson >.
Il 17 luglio 2016, alle 8:12 AM, Chuck Boiler < Chuck.Boiler@jmp.com <> Chuck.Boiler@jmp.com >> ha scritto:
Ciao Jeff. Mi chiedo se il tuo gruppo abbia prodotto documentazione in questo settore? Spero di vederti questa settimana e se hai accesso a questo tipo di contenuti possiamo parlarne? Le benedizioni di un fine settimana sono su di voi. . Mandrino
Inviato dal mio iPhone, a volte con la voce al testo. Si prega di scusare gli errori.
Inizia messaggio inoltrato:
Da: Chuck Boiler < Chuck.Boiler@jmp.com <> Chuck.Boiler@jmp.com >>
Data: 17 luglio 2016 alle 05:08:55 PDT
A: Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >>
Cc: Louis Valente < Louis.Valente@jmp.com <> Louis.Valente@jmp.com >>
Oggetto: Re: Qual è la dimensione massima del set di dati che JMP gestirà (in modo efficiente), supponendo che le specifiche di MacBook Pro siano al massimo?
Grazie Laura. Scommetto che possiamo trovare qualcuno che ha dati su questo argomento in Cary. Ne parliamo questa settimana. Viaggi sicuri. Mandrino
Inviato dal mio iPhone, a volte con la voce al testo. Si prega di scusare gli errori.
Il 16 luglio 2016, alle 12:03, Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >> ha scritto:
Ho bisogno di aiuto con questo. Abbiamo bisogno di produrre un documento per la gestione XXXXX. Posso spiegare di più la prossima settimana. Voglio solo ottenere questo sul radar. Forse uno di voi ha già fatto qualcosa del genere?
Laura.Higgins@JMP.com <> Laura.Higgins@jmp.com > mentre mobile
Inizia messaggio inoltrato:
A partire dal:
Data: 15 luglio 2016 alle 18:39:23 PDT
A: Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >>
Oggetto: Re: Qual è la dimensione massima del set di dati che JMP gestirà (in modo efficiente), supponendo che le specifiche di MacBook Pro siano al massimo?
Grazie per questa Laura, sono in Cina proprio ora - quindi cercherò di riconnetterti con te tra un paio di settimane.
La domanda fondamentale della nostra leadership è essenzialmente: "quando si interrompe JMP, a causa delle dimensioni dei dati" e "cosa possiamo fare per massimizzare l'efficacia dell'analisi JMP, cioè la compressione, ecc."
Cercherò con te così che noi (o io o qualcun altro) possiamo produrre un documento di riferimento, a meno che tu non abbia già un file / documento di questo tipo. per spingere alle squadre.
Il 16 luglio 2016, alle 05:55, Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >> ha scritto:
Ciao John-
Non esiste un limite architettonico per le tabelle di dati JMP per il numero di righe o colonne.
È un po 'difficile rispondere alla tua domanda perché dipende da cosa c'è nelle colonne e da quale operazione esegui in JMP.
I numeri occupano meno spazio dei dati dei caratteri e puoi comprimere le colonne (rimuovendo i bit inutilizzati) e anche lavorare con tabelle di dati compresse. Ciò riduce notevolmente le dimensioni del file JMP.
Molte operazioni sono multithread per sfruttare i core multipli. L'unica cosa che rallenterà il JMP è la grafica visiva pesante con tonnellate di colonne e / o punti.
Ho appena creato una tabella dati con 1.000.000 di righe e 3600-ish colonne di
1) numeri non compressi = 29,13 GB;
2) Colonne compresse = 3,5 GB
Pertanto, la compressione delle colonne consente di risparmiare quasi 10 volte lo spazio!
1 esegui 16 memoria GM ed era SLOW per la creazione / salvataggio iniziale della tabella JMP. Usando colonne compresse ha funzionato come la tabella dei dati più piccola!
Inoltre, dalla documentazione. Porta a casa -> la compressione delle colonne accelera l'analisi; la compressione della tabella dati NON velocizza l'analisi.
Comprimi il file quando salvato
Comprime la tabella di dati quando viene salvata. Dopo aver salvato la tabella di dati, un'icona di file compresso viene visualizzata accanto al nome della tabella di dati nel pannello della tabella. Vedi Compressa tabelle < http://www.jmp.com/support/help/Edit_Data_Tables.shtml#626887 > in Invio e modifica dati < http://www.jmp.com/support/help/Edit_Data_Tables.shtml#626887 >.
Suggerimento: puoi anche configurare JMP per utilizzare sempre la compressione GZ quando salvi le tabelle selezionando Preferenze> Generale> Salva colonne tabella dati GZ compresso.
Nota: l'opzione Comprimi file quando salvato riduce solo la dimensione del file. Questo comando non influisce sulla memoria richiesta per analizzare i dati. Per ridurre sia la dimensione del file che la memoria necessaria per l'analisi, utilizzare Cols> Utilità> Comprimi colonne selezionate. Vedi Comprimi colonne selezionate < http://www.jmp.com/support/help/Restructure_Data.shtml#769643 > in Invio e modifica dati < http://www.jmp.com/support/help/Restructure_Data.shtml#769643 >.
I dati dei personaggi sono più difficili da prevedere, perché dipende da cosa c'è nella colonna. Quando comprimi i dati dei personaggi, li trasforma in una lista di controllo (limitando efficacemente le opzioni di input al set esistente di opzioni - non un grosso problema a meno che tu non stia modificando i dati originali).
Non è una risposta cristallina, ma spero che questa informazione aiuti!
Saluti!
Laura
Laura A. Higgins, Ph.D.
JMP Sr. Ingegnere di sistemi
650.454.0633 | Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com > | #LauraHigginsPhD | www.jmp.com < http://www.jmp.com/ > | SAS Institute Inc. | San Francisco
Penso che questo sia ok per condividere testualmente:
JMP can handle at data table about half as big as the total amount of physical memory on the machine. So, a 16GB machine can handle a data table can 8GB data table and an 8 GB machine can deal with a 4GB data table.This guideline means that JMP should be able open a data table of this size and do simple and basic analyses on it. There are many analyses, table manipulations and model building platforms that can require significant amounts of memory, depending on the options and the specific data being used. We can’t promise that every analysis or operation can be performed with data tables of this size.The best estimate of the size of a data table is its (uncompressed) size on disk. The size of the data in text (e.g. .csv, .txt) format is a reasonable surrogate also.We can’t provide guidance on how many rows or columns JMP can handle since it’s highly dependent on the combination of the two and the types of data stored.There are a two different forms of “compression” for JMP data tables.Compress Selected Columnsa) Select the columns to be affectedb) Cols -> Compress Selected ColumnsThis option:• adds a List Check (default order) to character column if the column has less than 255 distinct values.• changes numeric columns to the smallest 1-byte, 2-byte, or 4-byte integer if all values in the column can be stored. Only integer values columns are checked.• For 1-byte integer, the range of numbers that you can store is from -126 to 127.• For 2-byte integer, the range of numbers that you can store is from -32,766 to 32,767.• For 4-byte integer, the range of numbers that you can store is from -2,147,483,646 to 2,147,483,647.• It will not change the columns if they have list check already.This option affects the amount of memory required to hold a data table in memory and, therefore, can allow JMP to work with more data.Compress Tablesa) Set option, “Compress File when Saved”, from red triangle menu on data table.This option uses gz compression to make the file smaller on disk only. The data is stored uncompressed in memory.
