38959_it-IT

liliconcom

Imposta soglia di probabilità/matrice di confusione

La soglia di probabilità predefinita è impostata su 0,5. Ciò può rendere difficile confrontare i modelli quando uno ha una specificità maggiore e una sensibilità inferiore, ma entrambi hanno precisioni simili e valori predittivi positivi. Come si cambia la soglia di probabilità per confrontare le prestazioni del modello?   

Grazie!

Aronne

Re: impostare soglia di probabilità/matrice di confusioneSì! Grazie!Re: impostare soglia di probabilità/matrice di confusioneAronne,
Non è chiaro su quale piattaforma stai lavorando. Se si dispone di JMP Pro e si stanno adattando modelli utilizzando la regressione generalizzata, una delle mie funzionalità preferite di JMP13 è la possibilità di modificare in modo interattivo la soglia di probabilità e osservare il cambiamento delle mie stime di sensibilità e specificità. Ma sto divagando. Per esplorare vari tagli su un modello, potrei salvare la formula del modello nella mia tabella dati in modo da poter impostare una colonna con la "chiamata modello" (usa la formula: punteggio> taglio per ottenere una colonna di 0 e 1s) e utilizzarlo per valutare le prestazioni del modello (pensare nel mondo del modello diagnostico). Se ti trovi nella piattaforma logistica e disponi di curve ROC per i tuoi modelli, la tabella ROC fornirà tabelle "2x2" per ogni possibile cut-off nel tuo set di dati. Infine c'è un componente aggiuntivo nello scambio di file che calcolerà una serie di misure delle prestazioni e intervalli di confidenza per i modelli di tipo diagnostico.

https://community.jmp.com/t5/JMP-Add-Ins/Performance-Summary-for-Diagnostic-Tests/ta-p/22524

Speriamo che qualcosa qui sia utile per quello che stai cercando di fare.