Explorateur de données fonctionnelles avec colonne de validationJ'ai un ensemble de données avec 40 spectres NIR avec des lignes comme fonctions. L'ensemble de données est divisé en un ensemble de formation et de validation à l'aide d'une colonne de validation de point de coupure ; Les 10 dernières lignes sont la validation.
En cours d'exécution de l'analyse FPCA, seul l'ensemble d'entraînement est installé comme indiqué ci-dessous ? Comment savoir si l'ajustement de l'ensemble de valdation est correct à l'aide du modèle de formation ?
Aucun ajustement pour l'ensemble de validation ?
Je suppose également que le tracé de diagnostic concerne uniquement l'ensemble de formation ?
Scores FPCA : les résultats de l'ensemble de validation sont-ils calculés avec le modèle de formation ?
Merci pour votre contribution !
Modélisation statistique avancéeModélisation prédictive et apprentissage automatiqueles fenêtresRe : Explorateur de données fonctionnelles avec colonne de validationSalut @frankderuyck ,
Je suis d'accord, la documentation sur l'utilisation des sets de validation pour Functional Data Explorer est un peu confuse sur les termes et l'utilisation des sets : Lancez la plateforme Functional Data Explorer (jmp.com)
Il n'y a que deux ensembles possibles utilisés dans Functional Data Explorer (contrairement à d'autres algorithmes de Machine Learning qui peuvent utiliser 3 ensembles : ensembles d'entraînement, de validation et de test) : ensemble d'entraînement (codé comme 0 ou la plus petite valeur) et ensemble de validation (codé comme 1 ou valeurs plus élevées).
L'ensemble de validation est en fait utilisé ici comme un ensemble de Test (si l'on utilise rigoureusement la bonne convention de nommage) : il n'est pas utilisé pour ajuster un modèle fonctionnel, mais vous pouvez extraire les scores FPCA de cet ensemble pour voir l'efficacité du modèle. ajustement sur de nouvelles données fonctionnelles : Résolu : Analyse et classification des données fonctionnelles : Comment calculer le FPC de nouvelles données (u... - JMP User Community
L'ensemble de formation est utilisé pour ajuster et évaluer l'ajustement du modèle, et tous les tracés du rapport que vous mentionnez sont réalisés sur l'ensemble de formation.
Vous pouvez évaluer l'ajustement du modèle sur les données de validation en extrayant la formule de prédiction sur le nouveau tableau de données (triangle rouge à côté de "[Modèle] sur [Données initiales]" et "Enregistrer les données"). Des colonnes de formules sont ajoutées (Prédiction et Résidus) et à l'aide de Graph Builder, vous pouvez visualiser le réel par rapport au prédit de vos données de validation, ou visualiser les résidus pour reproduire les résultats vus dans le rapport :
Mais je suis d’accord avec toi, avoir les résultats sur les données de validation directement sur la plateforme serait beaucoup plus simple. Cela pourrait être une bonne idée de l'ajouter à la liste de souhaits JMP si ce n'est déjà fait.
J'espère que cette réponse vous aidera,
Re : Explorateur de données fonctionnelles avec colonne de validationSuper réponse encore, merci Victor !
