Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Hola SEs
Me inscribí para entregar un segmento JMP en el aire de 20 minutos llamado "Pregunte al médico de datos". La idea es elegir de una colección de preguntas de preparación de datos que se han enviado a lo largo del tiempo, y mostrar una o más formas de realizar la (s) tarea (s) en JMP. Los problemas no tienen que ser diabólicos, pero idealmente deberían representar tareas de limpieza que un no experto (o incluso experto, supongo). ellos también necesitan nuestro amor) el usuario puede encontrar desconcertante.
Sin embargo, necesitamos cebar la bomba ... Actualmente tengo algunas ideas, pero estoy seguro de que tienes muchas más.
¿Podrías responder cualquier pregunta de preparación de datos que creas que los clientes (o ustedes mismos) pueden encontrar difícil o tedioso ... Los pondré en la "pila" y espero que podamos comenzar a usar algo que pueda usar para el primer segmento.
Lo dejé abierto, porque quién sabe lo que vendrá, eso es parte de la diversión. No puedo prometer que resolveré tu problema en el aire (o alguna vez;)), pero quién sabe...
Gracias,
Brady
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Gran tema, Brady.
¿Puede mostrarnos cómo importar y limpiar un conjunto de datos (300 filas) que tiene información de encabezado que se repite cada 30 filas?
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Hola Nick (y todos los demás),
Si tiene un conjunto de datos de ejemplo, (aún mejor: ANTES y DESPUÉS de las versiones) eso sería increíble, publíquelo así a) todos lo tendremos, b) no tendré que encontrar uno yc) puede evitar la falta de comunicación sobre cuál era realmente el objetivo de la tarea de limpieza.
Si no lo hace, puedo pensar en algo, pero para ser honesto, voy a tratar de minimizar el trabajo previo para mí, así puedo terminar inclinándome hacia ideas donde tengo un conjunto de datos de muestra.
Salud,
Brady
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Aquí hay un ejemplo algo antiguo (pero real) que, al menos desde la memoria, tiene bastantes disputas de datos. Me imagino que tendría que dividirlo en partes, pero es un buen caso de uno de nuestros principales mercados. Este es el tipo de aros por los que uno tiene que saltar si no sigue la guía ofrecida por Phil Ramsay en su reciente presentación de Discovery Munich. . .
Si lo usa, deberíamos anonimizar los datos, por supuesto. Hablando de eso, esto NO debe usarse con fines de demostración tal como es.
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Se adjunta un ejemplo que no proviene de nuestro mercado principal: datos de bienestar para las regiones del Reino Unido.
Es de la Oficina de Estadísticas Nacionales del Reino Unido, de uso gratuito.
No es realmente desagradable. Pero las personas responden bien a la visualización del resultado final.
Este es el resultado final que busca:
Puede obtener la tabla JMP final junto con los archivos de forma de mapa de la publicación pública de JMP . Para los fines de mi historia, excluí 2018 y 2019, pero no necesitaría hacer eso.
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Ver conjuntos de datos de ejemplo adjuntos
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Genial, gracias, Nick. ¿Necesito anonimizar esto?
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.No es necesario, son datos inventados.Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Datos tabulares desordenados de Wikipedia. A veces, "Internet Open" funciona bien, otras veces no tanto. Aquí hay un ejemplo inspirado por mi hija discutidora que no quería llevar spray para osos en un viaje de mochilero el verano pasado:
https://en.wikipedia.org/wiki/List_of_fatal_bear_attacks_in_North_America
Tabla de datos JMP masajeada adjunta.
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Hola brady
A veces las personas tienen problemas con la fecha en el archivo XLS. Dependiendo del idioma, no los manejan fácilmente (por ejemplo, la fecha en francés suele ser el día anterior al mes). Si tienes algunas líneas de error sobre este tema, ¡sería genial!
Gracias,
Florencia
Re: Una solicitud de reformateo de datos / limpieza / recodificación / desafíos de etc.Hola Florencia (y todos !!!!), ¿podrían enviarme algunos ejemplos de formatos de fecha desagradables que ven en sus áreas del mundo? Basado en discusiones con @Julian , hemos decidido hacer el primer programa sobre este tema. Presentaremos el complemento de formato de fecha, que cubre muchos casos (pero desafortunadamente no todos).
Me encantaría tener tantos ejemplos como sea posible, para poder encontrar algunos desagradables para mostrar. Por supuesto, también mostraré algunos de los casos más típicos.
Además, también será útil analizar los formatos que el complemento no puede resolver y por qué.
¡Gracias!