38959_fr-FR

liliconcom

Définir le seuil de probabilité / la matrice de confusion

Le seuil de probabilité par défaut est défini sur 0,5. Cela peut rendre difficile la comparaison des modèles lorsque l'un a une spécificité plus élevée et une sensibilité plus faible, mais les deux ont des précisions similaires et des valeurs prédictives positives. Comment modifier le seuil de probabilité pour comparer les performances du modèle ?   

Merci!

Aaron

Re : Définir le seuil de probabilité / la matrice de confusionOui! Merci!Re : Définir le seuil de probabilité / la matrice de confusionAaron,
La plate-forme sur laquelle vous travaillez n'est pas claire. Si vous possédez JMP Pro et que vous ajustez des modèles à l'aide de la régression généralisée, l'une de mes fonctionnalités préférées de JMP13 est la possibilité de modifier de manière interactive le seuil de probabilité et de voir mes estimations de sensibilité et de spécificité changer. Mais je m'égare. Pour explorer divers seuils sur un modèle, je peux enregistrer la formule du modèle dans ma table de données afin de pouvoir configurer une colonne avec "l'appel de modèle" (utilisez la formule : score> seuil pour obtenir une colonne de 0 et 1s) et l'utiliser pour évaluer les performances du modèle (penser dans le monde des modèles de diagnostic). Si vous êtes dans la plate-forme logistique et que vous avez des courbes ROC pour vos modèles, le tableau ROC fournira des tableaux "2x2" pour chaque seuil possible dans votre ensemble de données. Enfin, il existe un complément dans l'échange de fichiers qui calculera une série de mesures de performances et d'intervalles de confiance pour les modèles de type diagnostic.

https://community.jmp.com/t5/JMP-Add-Ins/Performance-Summary-for-Diagnostic-Tests/ta-p/22524

J'espère que quelque chose ici est utile à ce que vous essayez de faire.