Courbes de confianceDans l'article intitulé " Courbes de confiance : une alternative aux tests de signification des hypothèses nulles pour la comparaison des classificateurs ", Daniel Berrar détaille les problèmes liés à l'utilisation des tests de signification d'hypothèse nulle pour la comparaison des classificateurs et propose l'utilisation de courbes de confiance comme alternative. Après avoir installé le complément, vous pouvez générer des courbes de confiance pour comparer divers classificateurs avec un classificateur de référence de la manière suivante :
- Dans la barre de menus de JMP Pro, sélectionnez "Analyze => Predictive Modeling => Modeling Screening".
- Sélectionnez les paramètres appropriés pour les champs "Y, Response" et "X, Factor".
- Dans la section "Folded Crossvalidation" de la boîte de dialogue, activez l'option "K Fold Crossvalidation" et définissez le nombre de plis dans la zone de saisie "K", et le nombre de répétitions dans la zone de saisie "Repeated K Fold".
- Sélectionnez "OK" pour exécuter la plate-forme Model Screening.
- Lorsque la boîte de dialogue des résultats s'affiche, cliquez sur le menu du triangle rouge.
- Sélectionnez "Enregistrer le tableau des résultats"

- Dans la barre de menus de JMP Pro, sélectionnez « Compléments => Courbes de confiance ».
- Suivez les instructions affichées pour choisir le tableau de résultats généré à l'étape 6, le modèle de référence et la métrique à utiliser pour la comparaison.
- Ensuite, un rapport Graph Builder doit être généré similaire à celui illustré ci-dessous :

Dans l'article intitulé " Courbes de confiance : une alternative aux tests de signification des hypothèses nulles pour la comparaison des classificateurs ", Daniel Berrar propose des courbes de confiance comme alternative à l'utilisation de tests de signification d'hypothèse nulle pour la comparaison de classificateurs.
StatistiquesUtilitaires