Spiegazione della dichiarazione statistica degna di nota n. 2: significatività statistica vs importanza praticaAbbiamo tutti sentito qualcuno dire qualcosa che non è "giusto". A volte lo lasci andare, o perché non è abbastanza importante da sfidare, o perché non vuoi causare conflitti con chi parla.
Questa è la seconda puntata della serie di blog "statistiche imbarazzanti". In generale, ecco come funziona: in primo luogo, inserisco una specie di domanda relativa alle statistiche in a JMP Comunità Discussioni filo. Gli utenti della community sono incoraggiati a rispondere. Dopo circa una settimana, do la mia opinione su cosa c'è di sbagliato nell'affermazione in un post sul blog come questo.
Ecco una tabella di argomenti di discussione e post del blog fino ad oggi. Molte grazie a coloro che rispondono a ogni post di discussione (e/o aggiungono commenti al blog!)
Discussione Argomento del thread Post sul blog Persone che hanno risposto alla discussione (o hanno commentato il blog) #1: interpretazione errata del valore p Pericoli di interpretazione errata dei valori p @dale_lehman , @P_Bartell , @statman , @ih , @Giorgio , @brady_brady #2: Troppa enfasi sulla significatività statistica Questo articolo del blog @P_Bartell , , Craige_Hales , @ih , #3: Report sulle misurazioni Prossimamente! Si prega di inviare i propri commenti nello spazio Discussioni. Sentiti anche libero di contribuire con dichiarazioni statistiche degne di nota!Quindi diamo un'occhiata alla seconda dichiarazione imbarazzante che ho pubblicato...
La mia interpretazione di Cringeworthy #2Ricordiamo nel nostro scenario che era stato condotto uno studio per cercare di determinare il motivo per cui la resa era diminuita in un processo di produzione. È stato eseguito un t-test per studiare le differenze tra i sottoassiemi di due fornitori. In effetti, il t-test ha mostrato un valore p molto basso, dando un'elevata confidenza di una differenza nelle medie delle parti dei due fornitori.
Il team manager voleva saltare al fatto che il p-value fosse piccolo. Voleva iniziare immediatamente uno studio sul perché le due medie della popolazione fossero diverse. (Forse era guidato dall'esperienza passata che una differenza tra questi fornitori una volta aveva causato un problema.) Ma ciò che il manager non ha menzionato era se la differenza fosse "praticamente importante".
Nella mia esperienza, le persone spesso confondono "importanza statistica" con "importanza pratica".
La significatività statistica è semplicemente un'affermazione matematica secondo cui possiamo rilevare una certa quantità di differenza nelle medie delle due popolazioni a un certo livello di confidenza. Questo è carino, ma non dice nulla sul fatto che questa differenza sia importante per noi. L'importanza pratica si basa sul tuo giudizio, esperienza e saggezza. Forse il test statistico rileva una differenza di 0,1 unità tra i due trattamenti. Una differenza di 0,1 è importante per la tua applicazione? In caso contrario, forse sarebbe meglio dedicare risorse alla scoperta della fonte di questa differenza cercando altre fonti che potrebbero portare a una scarsa resa.Forse è un peccato che il termine "significato" possa essere interpretato come "importanza" in lingua inglese. Non conosco una parola migliore da usare di significato, ma può essere fuorviante per alcune persone.
Morale di questa storia: assicurati di comprendere la differenza tra significatività statistica e importanza pratica quando interpreti i risultati dell'analisi statistica!
Ora, per favore, vieni qui a Discussione degna di nota n. 3 !
"È statisticamente significativo! Dovremmo andare a dedicare risorse al problema!"
Questa affermazione ti fa rabbrividire? Dai un'occhiata al motivo per cui penso che questa sia un'affermazione degna di nota, in questo riassunto del mio secondo argomento di discussione.
AnalisiRe: Dichiarazione statistica degna di nota n. 2 spiegata: significatività statistica vs importanza pratica
Conosco molte persone che apprezzeranno la tua spiegazione dell'importanza statisticamente significativa rispetto a quella pratica.Alcuni anni fa, la FDA non ha condiviso la tua saggezza e un'intera sezione di un BLA ha dovuto essere riscritta. L'opinione della FDA ha richiesto un anno per la revisione.
Tuttavia, qualcuno potrebbe obiettare che un anno è banale se pensiamo al tempo sulla scala evolutiva umana. Quindi immagino che non fosse praticamente significativo.
Re: Spiegazione della dichiarazione statistica n. 2 degna di nota: significato statistico vs importanza praticaAhah grazie @DirtyDataCoLLC !
Ho sentito anche da @Craige_Hales , che ha inviato questo link sullo stesso argomento di discussione.In esso, l'autore raccomanda "Differenza distinguibile" invece di "Significato statistico", a causa delle implicazioni fuorvianti della SS.Ha molto senso per me!
Re: Spiegazione della dichiarazione statistica n. 2 degna di nota: significato statistico vs importanza praticaSto usando la differenza percepibile e l'importanza pratica ora. Ci si sente meglio. Si spera che ne seguiranno altri. Hai ragione. Questo è un lingua inglese problema. I sinonimi di significativo sono importante, cruciale, critico, significativo, critico, serio e vitale. Quindi l'uso improprio del termine ha senso.
Come possiamo convincere una percentuale significativa della popolazione a usare un'espressione, un'espressione, un termine o una parola più appropriati?
Non sono così bravo con le parole. Metto i numeri. Mi ci è voluto troppo tempo per scrivere quell'ultima frase. Non potevo scegliere il giusto espressione, enunciato, termine o parola. Quindi, li ho usati tutti.
Grazie ancora, @JerryFish ,
rapinare