令人尷尬的統計聲明 #2 解釋：統計顯著性與實際重要性
我們都聽過有人說過一些不「正確」的話。有時你只是放手，要不是因為它不夠重要，無法挑戰，就是你不想與說話者發生衝突。
這是「令人毛骨悚然的統計數據」部落格系列的第二部分。一般來說，其工作原理如下：首先，我在JMP社群討論線程中發布某種與統計相關的問題。我們鼓勵社區用戶回覆。大約一周後，我在這樣的部落格文章中給出了我對這種說法的錯誤的看法。
這是迄今為止的討論主題和部落格文章的表格。非常感謝那些回复每個討論帖子（和/或向博客添加評論！）的人
那麼讓我們來看看我發布的第二個令人尷尬的聲明...
我對 Cringeworthy #2 的看法
回想一下，在我們的場景中，已經進行了一項研究，試圖確定生產過程中產量下降的原因。進行 t 檢定是為了研究兩個供應商的組件之間的差異。事實上，t 檢定顯示出非常低的 p 值，這使得兩個供應商的零件平均值差異具有很高的可信度。
團隊經理想要立即接受 p 值很小的事實。他想立即開始研究為什麼這兩種總體平均值不同。 （也許他是受到過去經驗的驅使，認為這些供應商之間的差異曾經引起過問題。）但經理沒有提到的是這種差異是否「實際上很重要」。
根據我的經驗，人們經常將「統計意義」與「實際重要性」混為一談。
- 統計顯著性只是一種數學表述，顯示我們可以在一定的置信度下偵測到兩個總體的平均值存在一定程度的差異。這很好，但它沒有說明這種差異對我們是否重要。
- 實際重要性取決於您的判斷、經驗和智慧。也許統計檢定檢測到兩種處理之間存在 0.1 個單位的差異。 0.1 的差異對您的應用很重要嗎？如果不是，那麼也許投入資源來發現這種差異的根源，最好花在尋找可能導致產量低下的其他來源。
也許不幸的是，“重要性”一詞在英語中可以解釋為“重要性”。我不知道有什麼詞比重要性更好，但它可能會誤導一些人。
這個故事的寓意是：在解釋統計分析結果時，請務必了解統計顯著性和實際重要性之間的差異！
現在，請繼續進行令人畏懼的討論#3 ！
“這具有統計意義！我們應該投入資源來解決這個問題！”
這句話是否讓你感到畏縮？在我的第二個討論主題的摘要中看看為什麼我認為這是一個令人畏懼的陳述。
回复：令人畏懼的統計聲明 #2 解釋：統計意義與實際重要性我現在使用可辨別的差異和實際重要性。 感覺好多了。 希望其他人會效仿。 你是對的。 這是個英語問題。 重要的同義詞是重要的、關鍵的、關鍵的、有意義的、關鍵的、嚴重的和重要的。 所以濫用這個詞是有道理的。
我們如何讓很大一部分人使用更合適的表達方式、話語、術語或單詞？
我不太會說話。 我會堅持數字。 寫最後一句話花了我太多時間。 我無法選擇正確的表達、話語、術語或單詞。 所以，我把它們都用了。
再次感謝， @傑瑞魚,
搶
回复：令人畏懼的統計聲明 #2 解釋：統計意義與實際重要性哈哈謝謝@DirtyDataCoLLC ！
我也聽說@Craige_Hales , 誰發的這個鏈接關於同一個討論話題。在其中，由於 SS 的誤導性含義，作者推薦使用“可辨別差異”而不是“統計顯著性”。對我來說很有意義！
回复：令人畏懼的統計聲明 #2 解釋：統計意義與實際重要性
我知道很多人會喜歡你對統計顯著性與實際重要性的解釋。幾年前，FDA 沒有分享您的智慧，因此必須重寫 BLA 的整個部分。 FDA 的意見用了一年時間修改。
雖然，如果我們考慮人類進化尺度上的時間，有人可能會爭辯說一年是微不足道的。 所以我想這實際上並不重要。
