モデル分類のしきい値の調査これらは、ダウンロードして実行する方法の説明です。モデル分類エクスプローラーアドイン今年の夏にJMPインターンとして作成しました@KarenCと@mia_stephens 。このアドインは、モデルのカットオフとエラーのトレードオフを同時に視覚化するための統合ダッシュボードを提供します。 モデルのしきい値をインタラクティブに変更して、パフォーマンス測定値、混同行列、およびROC曲線で伝播された結果をすぐに確認できます。
注：これは、非常に大きなデータセットでは遅くなるか、フリーズする可能性があります。
ステップ1：添付の.jmpaddinファイルとサンプルデータテーブルをダウンロードします。
Data Selection DialogData Selection Dialogデータ選択ダイアログ
ステップ1：Prob [Donut]をXにキャストし、ConsumptionをYにキャストします。 これらの2つの列は必須です。
ステップ2：モデルが予測しているので、ターゲットレベルを「ドーナツ」に設定します。
ステップ3：統計分析のアルファレベルを設定します。デフォルトでは0.05のままです。
ステップ4：右上に、特定のアプリケーションフィールドに基づいてパフォーマンス用語を選択するオプションがあります。これは、さまざまなメジャーのラベルの純粋に視覚的なオプションです。 この場合、「一般」のままにしておきます。
ステップ5：視覚的アクセシビリティチェックボックスは、グラフの色を区別することなく結果を解釈できるようにグラフィック出力を変更する機能です。これについては、ここでは省略します。
ステップ6：これらの初期パラメーターをすべて設定したら、「OK」をクリックしてプラットフォームを起動します。 データセットのサイズと検証列を使用したかどうかによっては、起動に数秒かかる場合があります。
Interactively Exploring CutoffsInteractively Exploring Cutoffsカットオフをインタラクティブに探索する
コメントや提案があれば教えてください！
データの視覚化ライフサイエンス予測モデリングとデータマイニング統計学Re：モデル分類しきい値の調査親愛なるカレン、
2x2テーブルを再確認しましたが、正しいです。 そうです、代わりにIVDパフォーマンスアドインを使用できますが、これは、すべてのデータを正（しきい値未満）または負（上）のいずれかにタグ付けし、元の数値ではなくタグの結果を分析する必要があることを意味します。このスクリプトの「状態とスコア」の見栄えがよくありません。
ただし、IVDパフォーマンスアドインを使用します。これにより、最も必要な数が得られます。
助けてくれて本当にありがとうございます！
Re：モデル分類しきい値の調査こんにちはアン、私は正確にはわかりません...あなたが正しいTP、TNなどを持っているなら、あなたは正しいSeとSpを持っているべきです。 2x2テーブルを注意深く見て、ラベルを正しく読んでいることを確認してください。 ツールがしきい値の右側（より大きい）の値を正として使用することに同意しました。 あなたも私のを見るかもしれませんIVDパフォーマンス2つの名目上の列（テストと真理）に基づいてパフォーマンスを提供するアドインで、それぞれに対して何がポジティブであるかを定義できます。 しきい値を修正すると、おそらくそれはよりうまく機能します（また、はるかに高速に実行されます）。 それでも質問がある場合は、質問を続けてください。
カレン
Re：モデル分類しきい値の調査ターゲットを反転しましたが、サンプルがポジティブと見なされるため下あるしきい値の結果は、たとえば、特異性が本当に96.3％である場合、3.7％の結果が得られるということです。
ターゲットフリップ前のバージョンでは、すべての値が真陽性、偽陰性などとして正しく分類され、感度と特異度の値だけが逆になりました。 フリップ後、すべての真陽性は偽陽性として分類され、すべての偽陰性は真陰性として分類されます。
Re：モデル分類しきい値の調査起動ウィンドウでターゲットレベルを設定するオプションがあります。
Re：モデル分類しきい値の調査そのボタンがあるといいでしょう。 私のバージョンのアドインでは、「誤分類のしきい値を最小限に抑える」ことがわかりません。 レイアウト設定を変更する必要がありますか？
Re：モデル分類しきい値の調査あなたが「ターゲット」と呼んでいるものを裏返します。
Re：モデル分類しきい値の調査親愛なるカレン、
便利なアドインをありがとう！ 感度、特異度、PPV、NPVの計算に使用しようとしています。
私が得た数値は（私が持っている参照感度/特異度データと比較して）正しいものですが、感度と特異度、PPVとNPVを交換しています。
これは、応答列で陽性として指定した結果が、定義されたしきい値を下回っており、1を上回っていないという事実と関係があるのではないかと思います。 これを修正する方法についてアドバイスはありますか？
Re：モデル分類しきい値の調査「誤分類の最小化」ボタンに気づいたと思います...これは「確率しきい値の設定」の概要にあります。
Re：モデル分類しきい値の調査アドインにメソッドはありますか自動的分類しきい値を最適化します（=誤分類率を最小化します）？
Re：モデル分類しきい値の調査「真実」の列が文字でない場合は、文字タイプに変更してみてください。
Re：モデル分類しきい値の調査はい、ドーナツの例を問題なく実行できます。
Re：モデル分類しきい値の調査@Lu
なぜそのエラーが発生するのかわかりません。 アドインの[ヘルプ]ボタン（右側）をクリックすると、ユーザーズマニュアルが表示されます。 そうでなければ、より多くの情報がなければ、なぜあなたが問題を抱えているのかを知るのは難しいです。 ドーナツのサンプルデータを実行できますか？
カレン
Re：モデル分類しきい値の調査私のデータでアドインを試しましたが、常にこのエラーメッセージが表示されます：アッセイのアクセスまたは評価における添え字範囲。
Re：モデル分類しきい値の調査カレンありがとう！ 成功でした！ 繰り返しになりますが、どうもありがとうございました！
Re：モデル分類しきい値の調査こんにちはtsnow、
私の推測では、アプリはデータ量に問題があります。 多数の行で問題が発生していることがわかりました。正確には、その数はマシンの構成に依存する可能性があります。 ただし、すべてが失われるわけではありません。 そのサイズのデータテーブルを使用すると、ランダムなサンプルを取得して（別のテーブルにサブセット化して）、アプリを実行できると思います。 まず10％から始めて、アプリが実行されるかどうかを確認します。 もしそうなら、私は10％の4-5の異なるランダムサンプルを見て、サンプルに関係なく「同様の場所に着陸」しているかどうかを確認します。 もしそうなら、あなたはおそらくあなたの実際的な質問に答えることができます。 そうでない場合は、サイズの問題が再び発生するまで、さらにいくつかのサンプルを実行するか、より大きなサンプルを20％、30％試してみます。
お役に立てれば。 また、分布を理解するための出発点として、またカットポイントが問題に意味をなす可能性がある場所として、グラフビルダーのすべてのデータを使用してスコア対状態のプロットを作成することもできます。
カレン
Re：モデル分類しきい値の調査こんにちはカレンC。 JMP14を使用しています。 私はウィンドウズを使用しています。 11,221行あります。 「応答していません」というメッセージが表示されます。 よろしくお願いします。
ありがとう
Re：モデル分類しきい値の調査こんにちは、
なぜ問題が発生しているのかわかりませんが、詳細を教えていただけますか？ どのバージョンのJMPを使用していますか？ MacまたはWindows？ クラッシュしているのですか、それともぶら下がっていますか？ データテーブルの行数はいくつですか？
ありがとう
Re：モデル分類しきい値の調査これを数回試しましたが、毎回クラッシュします。 別の方法はありますか？
Re：モデル分類しきい値の調査素晴らしい！ 私はよく画面から離れる方法を探しているので、あなたのアドバイスに従って、少し回転させながら巡航します。
よろしくお願いします、marxx
Re：モデル分類しきい値の調査マルクス、
より大きなデータセットで試してみたい場合は、コンピュータから少し離れるときに実行してみて、戻ったときに実行されたかどうかを確認してください。 待つと実行されることがわかりました。 それは、始めるためにやるべき最初の「仕事」を持っているだけです。
カレン
Re：モデル分類しきい値の調査TarikとフォローアップのKarenを共有してくれてありがとう、それが利用可能になったときに、より大きなデータセットでのこの作業にも興味があります。
ありがとう、marxx
Re：モデル分類しきい値の調査こんにちはスティーブ、
はい、データセットが大きすぎる場合（N <1000を試してください）、アドインがJMPを「フリーズ」する可能性があることがわかりました。 私はクラッシュしたことはありません。あなたが経験したように、JMPがロックするだけです。 このパフォーマンスの問題を調査しています。 それまでの間、関心のあるデータのランダムなサブセットを試して、少なくともしきい値の調査を開始してください。 乞うご期待！
ありがとう、
カレン
Re：モデル分類のしきい値の調査このアドインは、JMPへの優れた追加機能です。 14.1を実行していますが、ドーナツデータで正常に動作します。 ただし、JMPがロックされ、選択した他のほとんどすべてのデータセットでクラッシュします。 何がうまくいかないかについての提案はありますか？
ありがとう。
スティーブパウエル
