<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />JMP puede manejar en la tabla de datos aproximadamente la mitad de la cantidad total de memoria física en la máquina. Por lo tanto, una máquina de 16 GB puede manejar una tabla de datos, una tabla de datos de 8 GB y una máquina de 8 GB puede manejar una tabla de datos de 4 GB.
Esta guía significa que JMP debe poder abrir una tabla de datos de este tamaño y realizar análisis simples y básicos sobre ella. Hay muchos análisis, manipulaciones de tablas y plataformas de construcción de modelos que pueden requerir cantidades significativas de memoria, según las opciones y los datos específicos que se utilicen. No podemos prometer que cada análisis u operación puede realizarse con tablas de datos de este tamaño.
La mejor estimación del tamaño de una tabla de datos es su tamaño (sin comprimir) en el disco. El tamaño de los datos en formato de texto (por ejemplo, .csv, .txt) también es un sustituto razonable.
No podemos proporcionar orientación sobre cuántas filas o columnas puede manejar JMP, ya que depende en gran medida de la combinación de los dos y los tipos de datos almacenados.
Hay dos formas diferentes de "compresión" para las tablas de datos JMP.
Comprimir las columnas seleccionadas
a) Selecciona las columnas a ser afectadas.
b) Cols -> Comprimir las columnas seleccionadas
Esta opción:
• agrega una verificación de lista (orden predeterminado) a la columna de caracteres si la columna tiene menos de 255 valores distintos.
• cambia las columnas numéricas al entero más pequeño de 1 byte, 2 bytes o 4 bytes si se pueden almacenar todos los valores de la columna. Sólo se comprueban las columnas de valores enteros.
• Para el entero de 1 byte, el rango de números que puede almacenar es de -126 a 127.
• Para el entero de 2 bytes, el rango de números que puede almacenar es de -32,766 a 32,767.
• Para enteros de 4 bytes, el rango de números que puede almacenar es de -2,147,483,646 a 2,147,483,647.
• No cambiará las columnas si ya tienen una lista de verificación.
Esta opción afecta la cantidad de memoria requerida para mantener una tabla de datos en la memoria y, por lo tanto, puede permitir que JMP trabaje con más datos.
Compress Tables
a) Establezca la opción, "Comprimir archivo al guardar", desde el menú del triángulo rojo en la tabla de datos.
Esta opción utiliza la compresión gz para reducir el tamaño del archivo solo en el disco. Los datos se almacenan sin comprimir en la memoria.
Jeff Perkinson
Gerente de atención al cliente de JMP
SAS Institute Inc.
SAS Campus Drive • Cary, Carolina del Norte 27513 • Estados Unidos
Teléfono: 919-531-6521
Email: Jeff.Perkinson@jmp.com <> Jeff.Perkinson@jmp.com >
Compartir. Pedir. Aprender. Conectar. - community.jmp.com < https://community.jmp.com >
Conéctate conmigo en la comunidad de usuarios JMP < https://community.jmp.com/people/jeff.perkinson >.
El 17 de julio de 2016, a las 8:12 am, Chuck Boiler < Chuck.Boiler@jmp.com <> Chuck.Boiler@jmp.com >> escribió:
Hola Jeff. Me pregunto si su grupo ha producido documentación en esta área. Espero verte esta semana y si tienes acceso a este tipo de contenido, ¿podemos hablar de ello? Bendiciones de un fin de semana sean con ustedes. . Arrojar
Enviado desde mi iPhone, a veces con voz a texto. Por favor, disculpe los errores.
Comience el mensaje remitido:
Desde: Chuck Boiler < Chuck.Boiler@jmp.com <> Chuck.Boiler@jmp.com >>
Fecha: 17 de julio de 2016 a las 5:08:55 AM PDT
Para: Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >>
Cc: Louis Valente < Louis.Valente@jmp.com <> Louis.Valente@jmp.com >>
Asunto: Re: ¿Cuál es el tamaño máximo de conjunto de datos que JMP manejará (de manera eficiente), asumiendo que las especificaciones de MacBook Pro están al máximo?
Gracias laura Apuesto a que podemos encontrar a alguien que tenga datos sobre este tema en Cary. Vamos a hablar de ello esta semana. Viajes seguros. Arrojar
Enviado desde mi iPhone, a veces con voz a texto. Por favor, disculpe los errores.
El 16 de julio de 2016, a las 12:03 PM, Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >> escribió:
Necesito ayuda con esto. Necesitamos producir un documento para la gestión de XXXXX. Puedo explicar más la próxima semana. Solo quiero poner esto en el radar. Tal vez alguno de ustedes ya haya hecho algo como esto?
Laura.Higgins@JMP.com <> Laura.Higgins@jmp.com > mientras móvil
Comience el mensaje remitido:
Desde:
Fecha: 15 de julio de 2016 a las 6:39:23 PM PDT
Para: Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >>
Asunto: Re: ¿Cuál es el tamaño máximo de conjunto de datos que JMP manejará (de manera eficiente), asumiendo que las especificaciones de MacBook Pro están al máximo?
Gracias por esta Laura, estoy en China ahora mismo, así que buscaré volver a conectarme contigo en un par de semanas.
La pregunta general de nuestro liderazgo es esencialmente: "cuándo se rompe JMP, debido al tamaño de los datos" y "qué podemos hacer para maximizar la efectividad del análisis JMP, es decir, la compresión, etc."
Haré un círculo con usted para que nosotros (yo o alguien más) podamos producir un documento de referencia, a menos que ya tenga un archivo / documento de este tipo. Para empujar a los equipos.
El 16 de julio de 2016, a las 5:55 AM, Laura Higgins < Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com >> escribió:
Hola John-
No hay límite arquitectónico en las tablas de datos JMP para el número de filas o columnas.
Es un poco difícil responder a su pregunta porque depende de lo que hay en las columnas y de la operación en JMP que está realizando.
Los números ocupan menos espacio que los datos de caracteres, y puede comprimir columnas (eliminando bits no utilizados), y también trabajar con tablas de datos comprimidos. Esto reduce enormemente el tamaño del archivo JMP.
Muchas operaciones son multiproceso para aprovechar múltiples núcleos. Lo único que ralentizará el JMP es un grafico visual pesado con toneladas de columnas y / o puntos.
Acabo de hacer una tabla de datos con 1,000,000 de filas y 3600-ish columnas de
1) números sin comprimir = 29.13 GB;
2) Columnas comprimidas = 3.5 GB
¡Así que comprimir columnas ahorra casi 10 veces el espacio!
Ejecuté 16 memorias GM y fue LENTO para crear / guardar la tabla JMP inicialmente. Usando columnas comprimidas actuó como la tabla de datos más pequeña!
Además, a partir de la documentación. Llevar a casa -> comprimir columnas acelera el análisis; La compresión de la tabla de datos NO acelera el análisis.
Comprimir el archivo cuando se guarda
Comprime la tabla de datos cuando se guarda. Después de guardar la tabla de datos, aparece un icono de archivo comprimido junto al nombre de la tabla de datos en el panel de la tabla. Ver tablas de compresión < http://www.jmp.com/support/help/Edit_Data_Tables.shtml#626887 > en Entrar y editar datos < http://www.jmp.com/support/help/Edit_Data_Tables.shtml#626887 >.
Consejo: También puede configurar JMP para usar siempre la compresión GZ al guardar tablas seleccionando Preferencias> General> Guardar columnas de tabla de datos GZ comprimida.
Nota: la opción Comprimir archivo cuando se guarda solo disminuye el tamaño del archivo. Este comando no afecta a la memoria requerida para analizar los datos. Para reducir tanto el tamaño del archivo como la memoria requerida para el análisis, use Cols> Utilities> Compress Selected Columns. Ver Comprimir las columnas seleccionadas < http://www.jmp.com/support/help/Restructure_Data.shtml#769643 > en Entrar y editar datos < http://www.jmp.com/support/help/Restructure_Data.shtml#769643 >.
Los datos de caracteres son más difíciles de predecir, ya que depende de lo que está en la columna. Cuando comprime los datos de caracteres, los convierte en una lista de verificación (limitando efectivamente las opciones de entrada al conjunto de opciones existentes, no es un gran problema a menos que esté modificando los datos originales).
No es una respuesta clara, pero espero que esta información te ayude.
¡Aclamaciones!
Laura
Laura A. Higgins, Ph.D.
JMP Sr. Ingeniero de sistemas
650.454.0633 | Laura.Higgins@jmp.com <> Laura.Higgins@jmp.com > | #LauraHigginsPhD | www.jmp.com < http://www.jmp.com/ > | SAS Institute Inc. | San Francisco
Creo que esto está bien para compartir textualmente:
JMP can handle at data table about half as big as the total amount of physical memory on the machine. So, a 16GB machine can handle a data table can 8GB data table and an 8 GB machine can deal with a 4GB data table.This guideline means that JMP should be able open a data table of this size and do simple and basic analyses on it. There are many analyses, table manipulations and model building platforms that can require significant amounts of memory, depending on the options and the specific data being used. We can’t promise that every analysis or operation can be performed with data tables of this size.The best estimate of the size of a data table is its (uncompressed) size on disk. The size of the data in text (e.g. .csv, .txt) format is a reasonable surrogate also.We can’t provide guidance on how many rows or columns JMP can handle since it’s highly dependent on the combination of the two and the types of data stored.There are a two different forms of “compression” for JMP data tables.Compress Selected Columnsa) Select the columns to be affectedb) Cols -> Compress Selected ColumnsThis option:• adds a List Check (default order) to character column if the column has less than 255 distinct values.• changes numeric columns to the smallest 1-byte, 2-byte, or 4-byte integer if all values in the column can be stored. Only integer values columns are checked.• For 1-byte integer, the range of numbers that you can store is from -126 to 127.• For 2-byte integer, the range of numbers that you can store is from -32,766 to 32,767.• For 4-byte integer, the range of numbers that you can store is from -2,147,483,646 to 2,147,483,647.• It will not change the columns if they have list check already.This option affects the amount of memory required to hold a data table in memory and, therefore, can allow JMP to work with more data.Compress Tablesa) Set option, “Compress File when Saved”, from red triangle menu on data table.This option uses gz compression to make the file smaller on disk only. The data is stored uncompressed in memory.
