Se está instalando en la parte profunda del invierno en Saratoga Springs, Nueva York. Esta es la época del año en que me siento con un chocolate caliente, miro la nieve y pienso. El año nuevo es un tiempo de contemplación para muchas culturas, un tiempo para evaluar nuestras deficiencias, para hacer resoluciones para mejorar o cambiar. Decir que soy introspectivo en esta época del año es decirlo suavemente. No sé qué tiene el invierno, pero me pone en un estado de ánimo profundamente contemplativo. Tengo muchas ideas durante esta época del año para proyectos y escritura. Esta pequeña reflexión ha estado cristalizando todo el fin de semana: una voz vieja y polvorienta en mi cabeza, como jean pastor recordando su tiempo en Cleveland Street, excepto que el mío habla de datos, análisis y Hot Pot de Mongolia...
Olla caliente mongola
Durante la primera semana de enero, estuve en una reunión de planificación con los otros miembros del equipo NY JMP en NYC. Decidimos hacer una pequeña actividad de trabajo en equipo en torno a un viaje a un restaurante Mongolian Hot Pot en China Town. Aquí hay una imagen:
Your New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike Anderson Su equipo de cuenta de JMP de Nueva York: (de derecha a izquierda) Brendan Leary, Tracey Bailey y Mike Anderson
Ahora, antes de que pienses que esto es un registro de viaje, espera un segundo. tengo un punto Primero, el restaurante es excelente, deberías ir si estás en la zona. Solo búscalo en Google. En segundo lugar, durante la comida, discutimos cómo proporcionaron instrucciones sobre cómo "hacer" el estofado mongol: el orden en que se agregaron diferentes cosas a la sopa para cocinar y cuánto tiempo deben permanecer en el caldo.
The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.El elixir celestial que es Mongolian Hot Pot. Las cosas de la derecha son súper picantes, las cosas de la izquierda, no tanto.
Me hizo pensar en cuántas de mis experiencias gastronómicas favoritas tenían un componente ritual. Hot Pot, etíope, sushi, cena de Acción de Gracias, incluso hacer pizza para mi familia los viernes por la noche: tenemos la costumbre de crear rituales en torno al consumo de alimentos. Le dan a la experiencia un significado y una importancia adicionales. Los rituales alimentarios pueden unir a las personas y consolidar las relaciones. Y, en mi estado mental contemplativo actual, hizo que mis ruedas giraran.
Rituales Analíticos
Ahora bien, ¿qué tiene esto que ver con JMP o la analítica en general? Bueno, estaba pensando más tarde esa noche en cómo surgen los rituales en otras partes de la experiencia humana, y no estoy hablando necesariamente de observancia religiosa aquí. A lo largo de los años, he visto muchos casos en los que el análisis se ha convertido en un ritual. Y resulta que esto puede ser un gran problema.
Todos los rituales tienen un atributo común. Su objetivo es enseñar o recordar a través de acciones. Generalmente también tienen algún tipo de marco (cultural, social, etc.) para reforzar el significado de los rituales. Los rituales analíticos comienzan de manera similar: con un intento de codificar una mejor práctica o algo que haya funcionado bien para alguien para que no se olvide. Estos rituales analíticos tienen muchos nombres: procedimientos, SOP, macros, plantillas, historias de éxito, etc. Y, sinceramente, eso está bien y probablemente sea algo bueno. La ritualización de la práctica analítica hace lo que hace cualquier ritual. Añade significado a la práctica. Al ritualizar el análisis, elevamos su importancia en una organización, particularmente cuando el liderazgo adopta o respalda los rituales. Como suele ser el caso, los rituales analíticos generalmente se convierten en parte de la cultura de una organización, se incrustan en su ADN. Y ahí es donde comienzan los problemas: ¿cuándo fue la última vez que pensaste bien sobre tu ADN?
El problema con los rituales analíticos
El problema que surge con los rituales analíticos es que, como todos los rituales, pueden moverse con el tiempo de consciente observancia a rutina observancia, es decir, simplemente seguir los movimientos. Y cuando eso sucede, pierden su significado. Esto es particularmente fácil para los rituales analíticos porque no necesariamente tienen la estructura de apoyo cultural o social para vincular el significado a las acciones. Los análisis, en las escalas organizacionales que estamos viendo hoy, son bastante nuevos y no siempre vienen con el conocimiento tribal inherente o la precaución que vienen con otras ciencias. Y eso es un problema.
Para los rituales analíticos, la pérdida de significado es particularmente peligrosa. Dado que el significado contiene el motivo del análisis, las suposiciones que se hacen y los casos de uso apropiados, el Por qué del ritual – la pérdida de significado puede conducir a una mala aplicación del análisis. En última instancia, los rituales analíticos despojados de su significado están muertos y son peligrosos. A lo largo de mi carrera, he visto muchos casos en los que es evidente que un ritual analítico valioso ha perdido su significado y los devotos simplemente siguen los movimientos, y tal vez no los movimientos correctos. Deja que te dé algunos ejemplos.
La guerra del valor P
Hace un tiempo, estaba leyendo un artículo sobre cómo algunas revistas científicas estaban comenzando a desalentar el informe de los valores de p o de los criterios de significación de p < 0,05. El argumento era que las personas usaban los criterios a ciegas o, en algunos casos, modificaban los resultados para poder informar un resultado favorable con respecto al valor p. La situación real es un poco más compleja.
En algún momento en el pasado, los investigadores se educaron en estadística y comenzaron a informar los valores p como una abreviatura conveniente de la importancia de los hallazgos o la fuerza de las tendencias en sus datos. Esta práctica fue incorporada a un ritual analítico por las revistas con una pauta de p < 0,05 como punto de referencia para la significancia. Esto es algo bueno: el valor p es una buena métrica para informar valores, siempre que se mantenga el contexto junto con las razones para elegir un criterio de valor p particular. Además, un nivel de clip de p < 0,05 para la prueba de hipótesis se usa ampliamente y generalmente es lo suficientemente bueno para muchas aplicaciones, siempre que el profesional entienda que es una guía que debe interpretarse críticamente y no de memoria.
El problema aquí vino cuando se perdió el significado del ritual, junto con su contexto. Los rituales vacíos conducen por malos caminos, como se ha visto en disciplinas en las que estas pautas de valor p se han convertido en reglas de valor p. Las reglas del valor p, a su vez, han promovido o permitido comportamientos indeseables.
El caso de la hoja de trabajo del punto de cambio
Hablando de malos caminos, hablemos de la venerable (o infame, si se quiere) plantilla de análisis. Muchas organizaciones, en un esfuerzo por simplificar el trabajo de su personal técnico o compensar una brecha en el conocimiento institucional, desarrollan plantillas analíticas en hojas de cálculo o análisis estándar en centros analíticos en línea. Se podría argumentar que esta codificación de los análisis es algo bueno, y yo estaría de acuerdo, hasta cierto punto. La organización ha puesto recursos para facilitar el seguimiento de una práctica analítica sólida. Como sucedió con los valores de p, el problema surge cuando se pierde el significado del ritual analítico. Un ejemplo en particular sobresale en mi mente.
Vi una organización que validaba los cambios en su proceso en función de una plantilla de hoja de cálculo. La plantilla tenía un cuadro de color y un diagrama de caja y bigotes. Si la casilla era verde, el cambio se consideraba aceptable. Cuando vi esta plantilla, le pregunté a la empresa cuándo era aceptable usar la plantilla y cuándo no. No pudieron darme una respuesta que no fuera la herramienta utilizada para validar todos los cambios en el proceso. El ritual había perdido su significado. Profundizando más (y aplicando ingeniería inversa a la plantilla), pude determinar que el análisis era un ANOVA simple, que viene con un cierto conjunto de suposiciones y condiciones bajo las cuales se puede usar. Alguien en el pasado había desarrollado la plantilla para estandarizar un tipo específico de análisis y, debido a la pérdida del significado del ritual analítico, estaba siendo muy mal utilizada.
La metodología de resolución de problemas
Voy a andar con cuidado aquí, pero esta próxima área de rituales analíticos podría pellizcar algunas narices. Hay muchos rituales analíticos que vienen empaquetados en "Metodologías de resolución de problemas" o "Métodos de mejora continua". No voy a dar nombres, probablemente puedas pensar en dos o tres por tu cuenta dependiendo de tu industria. Permítanme ser claro: no hay nada malo con estas metodologías o los rituales analíticos que enseñan. Son buenos puntos de partida para ayudar a las personas a lo largo de sus viajes analíticos.
El problema viene cuando los adherentes a estas metodologías no tienen el significado subyacente para los rituales analíticos, que es algo que veo un poco más a menudo de lo que me gustaría. Esto puede deberse a muchas cosas: porque el adherente se olvidó, porque no recibió la instrucción adecuada o incluso porque el instructor se vio obstaculizado por restricciones organizativas. En cualquier caso, el resultado es el mismo: los sistemas de rituales analíticos desprovistos del significado subyacente son recetas para el desastre. Conducen a una aplicación inadecuada de las herramientas oa una mala interpretación de los resultados. Estos, a su vez, pueden generar desconfianza en el análisis estadístico en general, lo cual es algo difícil de solucionar.
La solución
Entonces, ¿qué se debe hacer con los rituales analíticos huecos? En teoría, la solución es fácil: infundir el significado de nuevo en el ritual; recordarnos por qué estamos haciendo un análisis particular. En la práctica, eso podría ser una tarea difícil. Las personas que cuestionan cualquier ritual encuentran resistencia. Por alguna razón, los rituales analíticos tienden a tocar un nervio para algunos y son particularmente difíciles de abordar. No sé por qué, aunque tengo mis teorías. Lo cierto es que sin un refuerzo constante de los conceptos, cualquier ritual analítico puede llegar a perder su sentido. como con Ozymandias de Shelley , el tiempo siempre ganará si no estamos atentos. Y eso me lleva al punto de esta pequeña corriente de pensamiento: la única forma verdadera de arreglar un ritual analítico hueco es arreglarlo para nosotros mismos.
Una resolución de año nuevo
En muchas culturas, el año nuevo es un tiempo para resoluciones. Es un momento para mirar nuestras debilidades y tomar la decisión de mejorar, no de ser perfectos, simplemente mejores de lo que fuimos el año pasado. Entonces, aquí está mi propuesta: un desafío o un llamado a las armas, si lo desea: Examine sus rituales analíticos. Encuentre uno en el que crea que podría ser un poco débil y mejore su comprensión.
Hay algunos excelentes recursos gratuitos disponibles de JMP para ayudar. El primero es un sitio web que proporcionamos que tiene información sobre temas estadísticos comunes. se llama el Portal de conocimiento estadístico , y se actualiza con bastante frecuencia con contenido nuevo. El otro es un curso completo de estudio en estadística proporcionado por JMP y SAS Education llamaron Pensamiento estadístico para la resolución de problemas industriales (si eso es un poco complicado para usted, simplemente lo llamamos STIPS). También está el tablero de mensajes en el Comunidad de usuarios de JMP . Por último, si necesita ayuda para comenzar, comuníquese con nosotros. No lo sé todo (pregúntele a mi esposa), pero conozco a muchas personas que son mucho más inteligentes que yo y les encanta ayudar. Lo guiaremos en la dirección correcta.
Gracias por leer este pequeño artículo (¿pieza de tocador, tal vez?). Honestamente, lo escribí solo para que esa voz vieja y polvorienta desapareciera el tiempo suficiente para que pudiera trabajar en otra escritura (una de mis resoluciones).
Me gusta el cacao y contemplar, aunque...
¡Feliz año nuevo! Buena suerte y éxito con todas sus resoluciones, analíticas o de otro tipo.
El otro problema con el que siempre nos encontramos en relación con los rituales analíticos es, en mi opinión, esos rituales tienden a funcionar mejor cuando "todo sale según lo planeado". En mi carrera industrial fue el raro evento empírico que salió según lo planeado. Algunos ejemplos rápidos:
1. El experimento no se llevó a cabo en orden aleatorio... sino en el orden en que fue más fácil para los técnicos ejecutarlo.
2. Tuvimos que usar materias primas del proveedor X, que no descubrimos hasta que entramos en el inventario de materiales de laboratorio... nunca antes habíamos usado las cosas de ese proveedor para algo como esto.
3. Tuvimos que recalibrar el sistema de medición en medio del análisis de las respuestas.
4. Los técnicos deciden que los niveles de ciertos factores son 'tonterías'..."nunca antes habían funcionado en estos niveles. Solo usaremos lo que han usado en el pasado. Estarán tan contentos de que hayamos descubierto su error".
Y el abuelo de todos ellos... 5. Error tipográfico al ingresar valores de respuesta en la tabla de datos JMP o en la hoja de cálculo de Excel.
Cuando sucedieron estas cosas, fue un equipo adaptable, flexible e inquisitivo el que incorporó estos problemas y su posible impacto en el flujo de trabajo analítico.
