模型篩選平台:決策閾值刻畫器下的「記住設定」選項我非常喜歡 JMP 中分析 > 預測建模 > 模型篩選下的新模型篩選平台選項,如下所示: JMP Pro 16 中的模型篩選
https://community.jmp.com/t5/JMP-Blog/Model-Screening-in-JMP-Pro-16/bc-p/384039#M4078 。

我認為對我來說特別有用的一個功能- 在此示例或其他情況下- 當我在JMP 中的某些平台(如分析> 擬合模型)中指定擬合模型時,類似於預測刻畫器的選項- 到“記住設定”,以便我可以有效地在誤報率和漏報率的不同權衡場景之間進行“切換”。
我特別感興趣的場景是「分析」決策閾值機率的等級設置,以便調整模型以專注於最大限度地減少誤報,但可能會增加誤報。從品質風險的角度來看(以更高的製造廢品為代價保護最終用戶),可以容忍更高的誤報。
這是一張圖片,說明了我正在談論的內容(只是在X 的輸入設定的各種組合中選擇「記住設定」後,從預測刻畫器下的擬合模型平台輸出的普通「記住設定」(相同)糖尿病.jmp樣本資料集範例):

謝謝!
數據探索和視覺化回覆:模型篩選平台:決策閾值刻畫器下的「記住設定」選項我要求澄清這個願望:您是否希望將相同的閾值機率應用於所有模型,或者您是否要求為每個模型提供一些「最佳」閾值以供記住和比較?如果是前者,我認為這是一個壞主意。不同模型的機率分佈差異很大,因此可能為不同的模型選擇不同的閾值。如果是後者,那麼我不確定這將如何實現(但我喜歡這個想法)。它不能是自動的,例如最小化假陰性,因為這只會將閾值機率設為 0。因此,它需要允許您根據您如何看待權衡為每個模型選擇不同的閾值 - 也許是這樣可以與利潤矩陣結合使用(儘管我發現利潤矩陣很難使用)。
有一個簡單的滑桿來改變所有模型的閾值並顯示混淆矩陣對我來說並不是很有用。 我認為這會提供相對模型性能的錯覺 - 我並不真正關心一個模型是否需要 0.15 的閾值而另一個模型是否需要 0.30 - 我關心的是每個模型如何用於進行預測。