Discussions
Categories
Groups
Help
Home
Translated Content
Multi Source Translation Content
38959_zh-CN
liliconcom
设置概率阈值/混淆矩阵
默认概率阈值设置为 0.5。 当一个模型具有较高的特异性和较低的敏感性,但两者具有相似的准确性和阳性预测值时,这可能会导致比较模型变得困难。 我们如何改变概率阈值来比较模型性能?
谢谢!
亚伦
回复:设置概率阈值/混淆矩阵
是的! 谢谢你!
回复:设置概率阈值/混淆矩阵
亚伦,
目前尚不清楚您在哪个平台上工作。 如果您碰巧拥有 JMP Pro 并且正在使用广义回归拟合模型,那么我最喜欢的 JMP13 功能之一就是能够交互式地更改概率阈值并观察我的灵敏度和特异性估计值的变化。 但我离题了。 为了探索模型上的各种截止值,我可以将模型公式保存到我的数据表中,以便我可以使用“模型调用”设置一列(使用公式:score> cut-off 来获取一列 0 和1s)并用它来评估模型性能(在诊断模型世界中思考)。 如果您在物流平台中并且有模型的 ROC 曲线,那么 ROC 表将为数据集中每个可能的截止值提供“2x2”表。 最后,文件交换中有一个插件,它将计算诊断类型模型的一系列性能指标和置信区间。
https://community.jmp.com/t5/JMP-Add-Ins/Performance-Summary-for-Diagnostic-Tests/ta-p/22524
希望这里的一些内容对您想做的事情有所帮助。
Comments
There are no comments yet
Quick Links
All Categories
Recent Posts
Activity
Unanswered
Groups
Help
Best Of