Explicación de la afirmación estadística vergonzosa n.° 2: importancia estadística versus importancia práctica
Todos hemos escuchado a alguien decir algo que no está "bien". A veces, simplemente lo dejamos pasar, ya sea porque no es lo suficientemente importante como para cuestionarlo o porque no queremos causar un conflicto con el orador.
Esta es la segunda entrega de la serie de blogs sobre "estadísticas vergonzosas". En general, así es como funciona: primero, publico algún tipo de pregunta relacionada con las estadísticas en un hilo de discusión de la comunidad de JMP . Se anima a los usuarios de la comunidad a responder. Después de aproximadamente una semana, doy mi opinión sobre lo que está mal en la declaración en una publicación de blog como esta.
A continuación se muestra una tabla con los temas de discusión y las publicaciones del blog hasta la fecha. ¡Muchas gracias a quienes responden a cada publicación de discusión (y/o agregan comentarios al blog!)
| Tema del hilo de discusión |
Entrada de blog |
Personas que respondieron a la discusión (o comentaron en el blog) |
| #1: Mala interpretación del valor p |
Peligros de malinterpretar los valores p |
@dale_lehman , @P_Bartell , @statman , @ih , @Georg , @brady_brady |
| #2: Demasiado énfasis en la significación estadística |
Esta entrada de blog |
@P_Bartell , @statman , Craige_Hales , @ih , @markschwab |
| #3: Informes de mediciones |
¡Muy pronto! |
Por favor, publique sus comentarios en el espacio de Discusiones. ¡También siéntase libre de contribuir con sus propias estadísticas que den vergüenza ajena! |
Así que echemos un vistazo a la segunda declaración vergonzosa que publiqué...
Mi opinión sobre Cringeworthy #2
Recordemos que en nuestro escenario se había realizado un estudio para intentar determinar por qué había caído el rendimiento en un proceso de producción. Se realizó una prueba t para estudiar las diferencias entre los subconjuntos de dos proveedores. De hecho, la prueba t mostró un valor p muy bajo, lo que da un alto grado de confianza en la diferencia en las medias de las piezas de los dos proveedores.
El director del equipo quería aprovechar el hecho de que el valor p era pequeño. Quería iniciar de inmediato un estudio sobre por qué las medias de las dos poblaciones eran diferentes (tal vez lo impulsara su experiencia previa de que una diferencia entre estos proveedores había causado un problema en alguna ocasión). Pero lo que el director no mencionó fue si la diferencia era "prácticamente importante".
En mi experiencia, la gente a menudo confunde "significación estadística" con "importancia práctica".
- La significación estadística es simplemente una afirmación matemática que nos permite detectar cierta diferencia en las medias de las dos poblaciones con un cierto nivel de confianza . Esto es bueno, pero no dice nada sobre si esa diferencia es importante para nosotros.
- La importancia práctica se basa en su criterio, experiencia y sabiduría . Tal vez la prueba estadística detecte una diferencia de 0,1 unidades entre los dos tratamientos. ¿Es una diferencia de 0,1 importante para su aplicación? Si no es así, tal vez sería mejor dedicar recursos a descubrir la fuente de esta diferencia en lugar de buscar otras fuentes que puedan generar un rendimiento bajo.
Tal vez sea una lástima que el término "significado" pueda interpretarse como "importancia" en inglés. No conozco una palabra mejor que "significado" para usar, pero puede ser engañosa para algunas personas.
Moraleja de esta historia: ¡Asegúrese de comprender la diferencia entre significancia estadística e importancia práctica al interpretar los resultados del análisis estadístico!
¡Ahora, por favor, vengan a la discusión cringeworthy #3 !

"¡Es estadísticamente significativo! ¡Deberíamos dedicar recursos al problema!"
¿Le da vergüenza esta afirmación? Vea por qué creo que es una afirmación que da vergüenza en este resumen de mi segundo tema de debate.
Re: declaración de estadísticas vergonzosas # 2 explicada: importancia estadística frente a importancia prácticaEstoy usando diferencia perceptible e importancia práctica ahora. se siente mejor Con suerte, otros seguirán. Tienes razón. Esto es un idioma en Inglés problema. Los sinónimos de significativo son importante, crucial, crítico, significativo, crítico, serio y vital. Así que el mal uso del término tiene sentido.
¿Cómo logramos que un porcentaje significativo de la población use una expresión, enunciado, término o palabra más apropiados?
No soy tan bueno con las palabras. Pondré números. Me tomó demasiado tiempo escribir esa última oración. no pude elegir lo correcto expresión, enunciado, término o palabra. Entonces, los usé todos.
Gracias de nuevo, @JerryFish ,
Robar
Re: declaración de estadísticas vergonzosas # 2 explicada: importancia estadística frente a importancia prácticajajaja gracias @DirtyDataCoLLC !
también escuché de @Craige_Hales , quien envió este enlace sobre el mismo tema de discusión.En él, el autor recomienda "Diferencia perceptible" en lugar de "Significación estadística", debido a las implicaciones engañosas de SS.¡Tiene mucho sentido para mi!
Re: declaración de estadísticas vergonzosas # 2 explicada: importancia estadística frente a importancia práctica
Conozco a muchas personas que van a disfrutar de su explicación de la importancia estadística frente a la práctica.Hace algunos años, la FDA no compartió su sabiduría y hubo que reescribir una sección completa de una BLA. La opinión de la FDA tardó un año en revisarse.
Aunque, alguien podría argumentar que un año es trivial si pensamos en el tiempo en la escala evolutiva humana. Así que supongo que no fue prácticamente significativo.