Validation de l'explorateur de données fonctionnellesSalut,
J'utilise Functional Data Explorer pour générer des FPC à partir de 70 lots, chacun contenant environ 15 points de données fonctionnels. Je souhaite utiliser le modèle généré avec ces 70 lots pour générer les FPC de plusieurs nouveaux lots. Pour ce faire, j'utilise l'option de validation qui classe les 70 lots comme ensemble d'apprentissage et les nouveaux lots comme ensemble de validation.
Cependant, les FPC générés pour les nouveaux lots changent en fonction du nombre de nouveaux lots ajoutés - ne devraient-ils pas être les mêmes que le modèle généré à l'aide des 70 lots d'origine qui ne changent pas ?
Merci.
Modélisation statistique avancéeObjet : Validation de l'explorateur de données fonctionnellesSalut @Here4DOE ,
Bienvenue dans la Communauté !
Pour recevoir plus de commentaires et de réponses à vos questions, je vous recommande de lire Obtenir rapidement des réponses correctes aux bonnes questions .
Pourriez-vous fournir un peu de contexte et plus d'informations ? Peut-être une capture d'écran de la situation, des détails sur votre utilisation de la plateforme, la configuration de la colonne de validation, ou encore mieux, un exemple de données que nous pourrions utiliser pour reproduire la situation ?
J'ai essayé de reproduire votre situation en utilisant le jeu de données JMP « Processus de fermentation » et j'ai effectué l'analyse deux fois : une première fois avec apprentissage et validation de toutes les lignes, une seconde fois avec apprentissage de toutes les lignes, mais en excluant certaines lignes de validation. Pour les lignes de validation communes aux deux jeux, les FPC sont identiques :
Il s'agit d'une situation attendue : les lignes de validation de l'Explorateur de données fonctionnelles étant comparables à un ensemble de test, vous pouvez calculer les FPC et autres informations sur ces lignes à partir de l'ensemble d'apprentissage, mais l'ajustement du modèle n'est pas influencé par ces lignes de validation. Vous devez donc vous attendre à des valeurs identiques pour les lignes de validation, quel que soit le nombre de lignes ajoutées. Voir Validation dans la modélisation JMP .
Je pense qu'il pourrait y avoir autre chose qui vous donne ces résultats, peut-être une différence dans le fractionnement des données (pas les mêmes lignes pour l'entraînement, certaines sont-elles exclues ?) ou dans le traitement/la modélisation des données (un prétraitement/une mise à l'échelle/un alignement/... ? Même modèle et paramètres utilisés dans les deux situations ? Même nombre de fonctions de forme ? ...).
J'espère que cette réponse pourra vous aider en attendant,
Objet : Validation de l'explorateur de données fonctionnellesLorsque je procède comme vous le décrivez, en excluant l'entraînement et toute la validation, ainsi que l'entraînement avec un lot de validation, les FPC sont identiques pour les lots d'entraînement, mais diffèrent pour le lot de validation (voir capture d'écran ci-dessous). Toutes les lignes d'entraînement ont été incluses dans les deux cas, et ma colonne de validation est une colonne numérique contenant des 0 pour l'entraînement et des 1 pour les lots de validation. L'entrée X correspond à l'heure et, pour chaque lot, les heures pour lesquelles je dispose de données diffèrent, mais sont toutes dans la même plage.
Objet : Validation de l'explorateur de données fonctionnellesDésolé, mais il n'y a pas suffisamment d'informations pour vous aider et déboguer la situation.
Je vois votre problème mais ce n'est pas le comportement attendu, il ne devrait pas y avoir de différences en fonction du nombre de lignes de validation.
Pourriez-vous fournir un ensemble de données anonymisé ou reproduire le problème sur un ensemble de données standard JMP ?
Je crois vraiment qu’il pourrait y avoir une fuite de données ou des différences dans la modélisation quelque part.
Objet : Validation de l'explorateur de données fonctionnellesSalut @Here4DOE ,
Je suis d'accord avec @Victor_G : il faudrait consulter certaines données ou un ensemble de données reproduit pour comprendre comment cela se produit. Les valeurs FPC doivent être générées de manière cohérente, quelle que soit la taille de la validation. Comment accédez-vous aux scores FPC ? Enregistrez-vous les résumés de fonctions ?
Je vous suggère également de contacter support@jmp.com pour créer un dossier d'assistance afin d'examiner ce problème.
Merci,
Ben
