恥ずかしい統計的声明 #2 の説明: 統計的有意性と実際的重要性
誰もが、誰かが「正しくない」ことを言うのを聞いたことがあるでしょう。時には、異議を唱えるほど重要ではない、または発言者と対立したくないという理由で、そのまま放っておくこともあります。
これは「恥ずかしい統計」ブログ シリーズの 2 回目の投稿です。大まかな流れは次のとおりです。まず、 JMPコミュニティディスカッションスレッドに統計関連の質問を投稿します。コミュニティ ユーザーは返信をお願いします。約 1 週間後、次のようなブログ投稿で、その記述のどこが間違っているかについての私の見解を述べます。
これまでのディスカッション トピックとブログ投稿の表を以下に示します。各ディスカッション投稿に返信してくださった方 (および/またはブログにコメントを追加してくださった方) に深く感謝いたします。
それでは、私が投稿した2番目の恥ずかしい発言を見てみましょう...
私のCringeworthy #2についての見解
シナリオでは、生産工程で歩留まりが低下した理由を突き止めるために調査が行われたことを思い出してください。2 つのサプライヤーのサブアセンブリ間の違いを調べるために、t 検定が実行されました。実際、t 検定では非常に低い p 値が表示され、2 つのサプライヤーの部品の平均の違いについて高い信頼性が示されました。
チーム マネージャーは、p 値が小さいという事実に飛びつきたがりました。彼は、2 つの母集団の平均値がなぜ異なるのかをすぐに調査したいと考えました。(おそらく、これらのベンダー間の違いがかつて問題を引き起こしたという過去の経験に駆り立てられたのでしょう。) しかし、マネージャーが言及しなかったのは、その違いが「実際に重要」であるかどうかでした。
私の経験では、人々は「統計的有意性」と「実際的重要性」を混同することが多いです。
- 統計的有意性とは、単に、ある信頼度レベルで 2 つの母集団の平均にある程度の差を検出できるという数学的な記述です。これは良いことですが、その差が私たちにとって重要であるかどうかについては何も述べていません。
- 実際の重要性は、あなたの判断、経験、知恵に基づいています。統計テストでは、2 つの処理間で 0.1 単位の差が検出されるかもしれません。0.1 の差はアプリケーションにとって重要ですか? そうでない場合、この差の原因を発見するためにリソースを費やすよりも、収量の低下につながる可能性のある他の原因を探す方がよいでしょう。
英語では「significance」という語が「importance」と解釈される可能性があるのは残念なことかもしれません。significance より適切な言葉は思いつきませんが、一部の人にとっては誤解を招く可能性があります。
この話の教訓:統計分析の結果を解釈するときは、統計的有意性と実際的重要性の違いを必ず理解してください。
さあ、 Cringeworthy Discussion #3にぜひお越しください!
「統計的に有意です！この問題にリソースを投入すべきです！」
この発言を聞いて、あなたはうんざりしましたか? なぜこれがうんざりする発言だと思うのか、2 番目の議論トピックの要約をご覧ください。
Re: 非常識な統計ステートメント #2 の説明: 統計的有意性と実際的な重要性私は今、識別可能な違いと実用的な重要性を使用しています。 気分が良くなります。 うまくいけば、他の人が続くでしょう。 あなたが正しいです。 これは英語問題。 重要な したがって、この用語の誤用は理にかなっています。
より適切な表現、発話、用語、または単語を使用するために、人口のかなりの割合を取得するにはどうすればよいでしょうか?
私は言葉があまり得意ではありません。 数字を貼ります。 最後の文を書くのに時間がかかりすぎました。 右を選べなかった表現、発話、用語、または単語。 というわけで、全部使いました。
再度、感謝します、 @ジェリーフィッシュ、
ロブ
Re: 非常識な統計ステートメント #2 の説明: 統計的有意性と実際的な重要性笑ありがとう@DirtyDataCoLLC !
からも聞いた@Craige_Hales 、送信者このリンク同じ議論のトピックについて。その中で、著者は、SS の誤解を招く含意のため、「統計的有意性」ではなく「識別可能な差異」を推奨しています。私にはとても理にかなっています！
Re: 非常識な統計ステートメント #2 の説明: 統計的有意性と実際的な重要性
統計的有意性と実際的重要性に関するあなたの説明を喜んでくれる人をたくさん知っています。数年前、FDA はあなたの知恵を共有せず、BLA のセクション全体を書き直さなければなりませんでした。 FDA の見解は、修正に 1 年を要しました。
とはいえ、人間の進化のスケールで時間を考えれば、1年は些細なことだと主張する人もいるかもしれません。 したがって、実質的には重要ではなかったと思います。
