Explicación de la declaración estadística cringeworthy n. ° 2: significancia estadística frente a importancia prácticaTodos hemos escuchado a alguien decir algo que no está "bien". A veces simplemente lo dejas pasar, ya sea porque no es lo suficientemente importante como para desafiarlo o porque no quieres causar un conflicto con el hablante.
Esta es la segunda entrega de la serie de blogs de "estadísticas vergonzosas". En general, así es como funciona: primero, publico algún tipo de pregunta relacionada con las estadísticas en un JMP Comunidad Discusiones hilo. Se anima a los usuarios de la comunidad a responder. Después de aproximadamente una semana, doy mi opinión sobre lo que está mal con la declaración en una publicación de blog como esta.
Aquí hay una tabla de temas de discusión y publicaciones de blog hasta la fecha. Muchas gracias a quienes responden a cada publicación de discusión (¡y / o agregan comentarios al blog!)
Tema de discusión Publicación de blog Personas que respondieron a la discusión (o comentaron en el blog) # 1: mala interpretación del valor p Peligros de malinterpretar los valores p @dale_lehman , @P_Bartell , @statman , @ih , @Georg , @brady_brady # 2: demasiado énfasis en la significación estadística Esta publicación de blog @P_Bartell ,, Craige_Hales , @ih , # 3: Informe de mediciones ¡Próximamente! Publique sus comentarios en el espacio de Discusiones. ¡También siéntase libre de contribuir con sus propias declaraciones estadísticas dignas de vergüenza!Así que echemos un vistazo a la segunda declaración vergonzosa que publiqué ...
Mi opinión sobre Cringeworthy # 2Recuerde en nuestro escenario que se había realizado un estudio para tratar de determinar por qué había caído el rendimiento en un proceso de producción. Se realizó una prueba t para estudiar las diferencias entre los subconjuntos de dos proveedores. De hecho, la prueba t mostró un valor p muy bajo, lo que dio una alta confianza en una diferencia en las medias de las piezas de los dos proveedores.
El director del equipo quería saltar sobre el hecho de que el valor p era pequeño. Quería comenzar de inmediato un estudio sobre por qué las dos medias poblacionales eran diferentes. (Quizás lo impulsó la experiencia pasada de que una diferencia entre estos proveedores había causado alguna vez un problema). Pero lo que el gerente no mencionó fue si la diferencia era "prácticamente importante".
En mi experiencia, la gente a menudo confunde "significación estadística" con "importancia práctica".
La significancia estadística es simplemente una afirmación matemática de que allí podemos detectar cierta cantidad de diferencia en las medias de las dos poblaciones con algún nivel de confianza. Esto es bueno, pero no dice nada sobre si esa diferencia es importante para nosotros. La importancia práctica se basa en su juicio, experiencia y sabiduría. Quizás la prueba estadística detecte una diferencia de 0,1 unidades entre los dos tratamientos. ¿Es una diferencia de 0,1 importante para su aplicación? De lo contrario, quizás sería mejor dedicar recursos a descubrir la fuente de esta diferencia buscando otras fuentes que pudieran conducir a un bajo rendimiento.Quizás sea una lástima que el término "significado" pueda interpretarse como "importancia" en el idioma inglés. No conozco una palabra mejor para usar que significado, pero puede ser engañosa para algunas personas.
Moraleja de esta historia: ¡asegúrese de comprender la diferencia entre significación estadística e importancia práctica al interpretar los resultados analíticos estadísticos!
Ahora, por favor ven a Discusión digna de vergüenza # 3 !
"¡Es estadísticamente significativo! ¡Deberíamos ir a dedicar recursos al problema! "
¿Esta declaración te hace temblar? Eche un vistazo a por qué creo que esta es una declaración digna de vergüenza, en este resumen de mi segundo tema de discusión.
AnalíticaRe: explicación de la declaración de estadísticas Cringeworthy # 2: significancia estadística vs importancia práctica
Conozco a muchas personas que van a disfrutar de tu explicación de importancia estadística frente a importancia práctica.Hace unos años, la FDA no compartió su sabiduría y se tuvo que reescribir una sección completa de un BLA. La opinión de la FDA tardó un año en revisarse.
Aunque, alguien podría argumentar que un año es trivial si pensamos en el tiempo en la escala evolutiva humana. Así que supongo que no fue prácticamente significativo.
Re: declaración de estadísticas vergonzosas # 2 explicada: importancia estadística frente a importancia prácticajajaja gracias @DirtyDataCoLLC !
también escuché de @Craige_Hales , quien envió este enlace sobre el mismo tema de discusión.En él, el autor recomienda "Diferencia perceptible" en lugar de "Significación estadística", debido a las implicaciones engañosas de SS.¡Tiene mucho sentido para mi!
Re: declaración de estadísticas vergonzosas # 2 explicada: importancia estadística frente a importancia prácticaEstoy usando diferencia perceptible e importancia práctica ahora. se siente mejor Con suerte, otros seguirán. Tienes razón. Esto es un idioma en Inglés problema. Los sinónimos de significativo son importante, crucial, crítico, significativo, crítico, serio y vital. Así que el mal uso del término tiene sentido.
¿Cómo logramos que un porcentaje significativo de la población utilice una expresión, enunciado, término o palabra más apropiados?
No soy tan bueno con las palabras. Pondré números. Me tomó demasiado tiempo escribir esa última oración. no pude elegir lo correcto expresión, enunciado, término o palabra. Entonces, los usé todos.
Gracias de nuevo, @JerryFish ,
Robar
