J'effectue une procédure par étapes et j'évalue les performances à l'aide d'un k-fold r-squared. Actuellement, le seul k-fold r-carré fourni est moyenné sur les 5 plis. Est-il possible de sécuriser le r au carré pour chaque k-fold individuel dans un modèle ?
Bonjour @bbrown1 ,
Afin de voir les résultats individuels pour chaque pli, vous pouvez essayer d'utiliser à la place la plateforme "Model Screening" ("Analyze", "Predictive Modeling", "Model Screening").
Vous entrerez vos facteurs et votre ou vos réponses, cochez la "Validation croisée K-fold", spécifiez le nombre de plis et cochez simplement "Fit Stepwise" dans le menu "Méthodes".
Ensuite, vous devriez avoir vos résultats de plis individuels pour la formation et la validation comme dans cette capture d'écran :
Attention à ne pas faire de "cherry picking" et choisir d'utiliser le pli avec les meilleurs résultats, car cela signifierait que vous choisissez l'ensemble d'entraînement et de validation afin d'obtenir les meilleurs résultats, ce qui n'est pas la cible de cette technique de validation ( et pas du tout l'objectif d'une validation). Il s'agit davantage d'évaluer la robustesse d'un modèle dans le contexte d'un petit ensemble de données, où aucune donnée n'est "perdue" ou exclue de l'ensemble de validation.
Vous pouvez trouver plus d'informations sur la validation croisée et l'évaluation des modèles dans cette discussion : Résolu : Quelle est la qualité de la validation croisée K-fold pour les petits ensembles de données ? - Communauté d'utilisateurs JMP
j'espère que ça va t'aider,
