DOE pour tester la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Chers JMP et communauté,
Pendant cette période d'être coincé à la maison avec des enfants et de travailler sur des projets scolaires, j'ai pensé à faire un "test de goût" avec mon fils qui a récemment affirmé qu'il pouvait dire la couleur d'un bonbon au chocolat en fonction de la couleur de la coque du bonbon ( c'est un bonbon similaire à celui de M&M).
je ne suis pas tout à fait sûr comment pour configurer le DOE car il ne relève pas tout à fait de Choice ou MaxDiff Designs, ou du Covering Array ou du DOE non linéaire. Ce n'est pas tout à fait la même chose que la chips blog de smackdown ou les blogs de chocolat smackdown ici et ici .
Je veux simplement tester si mon fils peut vraiment (dans un essai aveugle et randomisé des bonbons) goûter la saveur de la coloration et la prédire correctement.
À l'heure actuelle, je n'en suis venu qu'à l'idée suivante d'utiliser le DOE personnalisé avec un facteur X1 : Couleur réelle, et la réponse étant Couleur prédite : 1 si la prédiction est correcte, 0 sinon. Ensuite, en examinant la distribution de la colonne de réponse et en examinant la proportion zéro et la proportion non nulle, nous pourrions avoir une idée de la fréquence à laquelle il avait raison ou tort.
C'est assez facile et direct, mais je pense qu'il pourrait être intéressant d'enregistrer à la place la réponse et d'analyser le DOE de telle manière que nous puissions voir s'il est réellement capable de goûter la différence dans certaines couleurs, disons toujours obtenir le bleu et violet correct, peut-être parfois avec du vert, mais jamais avec du violet.
Au début, tout ce projet semblait facile, mais plus je réfléchis à la façon de le concevoir et de l'analyser pour apprendre des informations plus précieuses (que simplement s'il a raison ou tort), plus je vois que c'est compliqué, du moins pour moi. Ce n'est pas si simple pour moi sur la façon de le configurer pour obtenir des informations vraiment intéressantes.
Si quelqu'un a des suggestions, j'apprécie vos commentaires!
Merci,
DS
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Salut @P_Bartell ,
Merci pour les liens, ce sont des lectures très intéressantes. Les statapults sont un peu chers, mais ont l'air très cool. D'après le manuel, la conception semble assez simple, et celle que je pourrais peut-être mettre en place avec lui -- pourrait être un bon projet Scout pour lui et moi sur lequel travailler. En attendant, je pense que l'hélicoptère volant sera un excellent exemple, et il s'amusera avec.
Merci encore à tous pour vos retours d'informations !
DS
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)@SDF1 Très cool. Je ne sais pas pourquoi je n'y ai pas pensé avant, mais ce problème est très similaire au célèbre récit "Lady Tasting Tea" de nul autre que RA Fisher.
https://en.wikipedia.org/wiki/Lady_tasting_tea
Il y a des années, lorsque mes enfants étaient plus petits, j'étais instructeur dans tous les programmes éducatifs Six Sigma d'Eastman Kodak Company. Nous avions toutes sortes de jouets sympas avec lesquels jouer. J'essayais souvent nos modules de formation avec un nouveau jouet avec nos enfants. Nous avons pensé que si un enfant de 8 ans pouvait l'obtenir... un ingénieur chez Kodak a aussi une chance de se battre. Je les emmenais aussi à leur lycée pour des démonstrations avec les enfants. Deux d'entre eux étaient les plus amusants pour les enfants : le « Statapult » et les hélicoptères en papier. Les statapultes sont un peu chères... mais les hélicoptères en papier sont très bon marché. Juste besoin de papier, de ciseaux et peut-être de quelques accessoires comme des trombones et un chronomètre. Les enfants se sont bien amusés et ont adoré quand M. Bartell est venu jouer avec nous... et ils ont aussi appris une ou deux choses sur les statistiques !
Voici un lien pour les hélicoptères :
https://williamghunter.net/george-box-articles/teaching-engineers-experimental-design-with-a-paper-helicopter
Et les statapultes :
https://sixsigmaproductsgroup.com/product/the-statapult-catapult/
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Salut @Mark_Bailey , @P_Bartell , @statman ,
Je suis heureux d'annoncer que nous avons mené l'expérience, et c'était très amusant ! J'ai imprimé les pistes et ma femme s'est bien amusée à mener l'expérience pour nous - elle a géré les bonbons, l'eau, le marc de café et enregistré nos réponses. Nous sommes tous les deux restés les yeux bandés tout le temps, même si nous pouvions entendre les réponses de l'autre. Je joins le tableau de données, mais je ne fais que commenter certains des premiers résultats. Pour rappel, il y avait trois facteurs : la couleur réelle du bonbon (bleu, vert, rose, violet), le testeur (A et
et la méthode de nettoyage (eau ou odeur de marc de café).
Global:
- le DOE a sélectionné chaque couleur et chaque méthode de nettoyage de la même manière, mais a transféré une série à un testeur plutôt qu'à l'autre, de sorte que les testeurs n'ont pas été choisis de la même manière.
- En tant que collectif, les deux testeurs n'étaient corrects que 28 % du temps, ce qui n'est pas très différent de la chance aléatoire de 25 % (pas de surprise là-bas).
- Le rose était la couleur la moins fréquemment prédite. En fait, dans la carte thermique globale, on voit que le rose n'a en fait JAMAIS été correctement choisi. S'il y a une différence de saveur, c'est celle que les deux testeurs ont mélangée avec d'autres couleurs.
- L'analyse des contingences donne un rapport de vraisemblance de seulement 8,4, donc assez petit (encore une fois, ce n'est pas surprenant).
- Les deux testeurs avaient un nombre égal de réponses correctes (4), bien qu'un nombre inégal d'exécutions.
- La carte thermique globale montre que le bleu a été correctement choisi parmi toutes les couleurs (4 fois), le vert et le violet étant également choisis correctement (2 fois chacun).
Par testeur :
- Soi-disant, le testeur A était correct 31% du temps par rapport au testeur B avec 27%, mais je pense que cela déforme la capacité du testeur A à identifier correctement la couleur car le testeur A n'avait que 13 bonbons au total et non 14 comme le testeur B.
- Les deux testeurs avaient des distributions presque identiques dans leurs fréquences de choix de couleurs. Donc, c'est peut-être une indication qu'il pourrait y avoir une sorte de différence de saveur, mais pas celle que l'un ou l'autre des testeurs est formé pour détecter.
- Le testeur B a eu de meilleurs résultats en rafraîchissant ses sens en utilisant du marc de café par rapport à de l'eau 75 %/25 %, tandis que le testeur A était à 50/50 entre les deux.
- Une carte thermique du testeur suggère que le testeur B pouvait différencier plus de couleurs (peut-être), car ce testeur était capable de déterminer correctement 3 des 4 couleurs, même si la précision était encore faible. Le testeur A n'a pu distinguer correctement que deux couleurs, mais aussi avec une faible précision.
- Une analyse de contingence par testeur montre à nouveau des rapports de vraisemblance très faibles, mais indique que le testeur A est le double du rapport. Je n'en suis pas sûr à cause du nombre inégal de runs entre les testeurs, mais peut-être que l'analyse en tient compte ?
Toute autre pensée serait très appréciée. Au fait, j'ai utilisé le JMP 16EA1 pour analyser les résultats (j'exécute des calculs avec JMP Pro 15.0 et je ne veux pas les interrompre).
Je pense que la meilleure chose qui en est ressortie est que mon fils est maintenant ravi de faire un DOE - comme un test de goût pour la préférence des garnitures de crème glacée ou d'autres bonbons avec ses amis. Alors bon, même si nous n'avons pas vraiment trouvé grand-chose de ce DOE, cela l'a intéressé à en faire plus et à essayer quelque chose de nouveau. Pour un enfant de 10 ans, je trouve ça génial !
Merci à tous pour votre participation!,
DS
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Salut @P_Bartell ,
Merci pour les commentaires et le lien vers les BIBD. J'avais lu un peu à ce sujet avant aussi. Cependant, lorsque j'ai essayé différentes conceptions au sein de cette plate-forme, je n'arrivais pas à obtenir le type de conception auquel je pensais comme je le pouvais avec le DOE personnalisé. C'est peut-être parce que je ne connais pas très bien les BIBD. Nous pourrions essayer cela à une date ultérieure et sous un design différent.
J'ai fini par utiliser un DOE personnalisé qui a quatre niveaux pour les couleurs, deux participants (moi et mon fils), puis deux méthodes de "nettoyage" entre les échantillons (prendre un verre d'eau ou sentir du marc de café). Je pense que ce sera amusant de faire avec lui, et ma femme va être la modératrice et noter les réponses.
Je ne manquerai pas de mettre à jour la discussion avec la façon dont les choses se sont passées. J'apprécie vraiment les commentaires et les réflexions de chacun à ce sujet.
Merci!,
DS
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Comme toujours, @Mark_Bailey et @statman offrent des indications précieuses. Une pensée pour votre choix de famille de plans expérimentaux est un plan de bloc incomplet équilibré. Au cours de mon mandat en tant qu'ingénieur système senior au sein de la division JMP de SAS, j'ai travaillé avec plusieurs entreprises qui ont ce qu'ils appellent des « panels sensoriels » qui mènent des types similaires d'enquêtes empiriques pour les cosmétiques, les aliments, les épices, etc. Ces panélistes sont hautement qualifiés pour évaluer et fournir des données sensorielles (numériques et textuelles) généralement dans le cadre des efforts de R & D et de développement de nouveaux produits de l'entreprise. La conception de blocs incomplets équilibrés était la pierre angulaire de la conception de type «aller à» pour une grande partie de leur travail. Peut-être "exagéré" pour votre situation... mais ça vaut le coup d'œil ? Voici un lien vers la famille de conceptions dans la documentation JMP en ligne :
https://www.jmp.com/support/help/en/15.1/#page/jmp/balanced-incomplete-block-designs.shtml#
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Le blocage n'est pas une mauvaise idée. Utilisez des blocs d'effets aléatoires dans ce cas.
Autre idée : démontrer d'abord l'hypothèse nulle. Ma fille est rentrée à la maison avec un devoir en deuxième année. On leur a donné un problème (toutes les informations fournies) et on leur a dit d'effectuer un test t pour décider de la différence de hauteur des plantes sous deux traitements. J'étais aux anges ! D'abord. Puis j'ai réalisé qu'il n'y avait ni compréhension ni apprentissage, alors j'ai utilisé la méthode socratique pour la guider à travers les étapes mentales du test d'hypothèse. Elle a cloué.
Je suggère donc de mettre en place quelque chose où la réponse est aléatoire. Précisez que l'attribution de la couleur est purement aléatoire sans association avec la vraie couleur. Faites cette partie plus d'une fois. Demandez-lui ensuite de classer la couleur du bonbon. Montrez-lui les résultats et rappelez-lui que la tâche aurait pu être aléatoire. En fait, la base du test (c'est-à-dire le nul) est qu'il est aléatoire.
J'ai hâte d'entendre comment votre explication des tests de rapport de vraisemblance se déroule...
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Salut @statman ,
Oui, désolé pour la faute de frappe. Son affirmation était qu'en goûtant le bonbon, il pouvait dire la couleur de la coquille du bonbon.
À l'heure actuelle, nous n'avons qu'un seul sac de bonbons. J'aime l'idée d'ajouter un deuxième testeur au mélange et peut-être même une méthode de nettoyage.
Je pense que ce sera amusant, surtout pour lui !
Merci pour les commentaires.
DS
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Je suis un peu confus par ceci dans votre message:
" J'ai pensé à faire un "test de goût" avec mon fils qui a récemment affirmé qu'il pouvait dire la couleur d'un bonbon au chocolat en fonction de la couleur de la coque du bonbon"
Je suppose que vous voulez dire qu'il peut deviner la couleur en fonction du goût ?
D'abord ce que Mark a dit. J'ajouterai qu'il est difficile d'évaluer les erreurs de mesure, en particulier en ce qui concerne la perception sensorielle. Vous pouvez ajouter un autre testeur (un autre frère ou vous à l'étude). Vous pourriez également penser à la façon dont les papilles gustatives sont "nettoyées" entre les échantillons ? Cela pourrait vous permettre d'ajouter un autre facteur à la conception. Que diriez-vous de la variation sac à sac du bonbon lui-même? Est-ce que ça varie ? Et les autres marques ? Excellente idée d'enseigner les conceptions factorielles aux enfants avant qu'ils ne soient critiqués par les OFAT dans le milieu universitaire.
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Salut @Mark_Bailey ,
Vous avez tout à fait raison de dire que les preuves ne le font pas changer d'avis ! J'ai pensé que ce pourrait être un exercice amusant pour lui d'acquérir de l'expérience avec le DOE et de comprendre ensuite les résultats de l'analyse. Et, il est plus que d'accord pour manger plus !
J'ai également pensé au changement dans la colonne de réponse, et à la suppression de la limite de réponse à analyser dans la plateforme de contingence. Je pourrais en fait faire les deux pour voir la distribution générale ainsi que la contingence.
Concernant le design, pensez-vous que je devrais le bloquer pour qu'il « fasse une pause » afin de ne pas influencer la prise de décision en dégustant trop du même chocolat ? Peut-être le bloquer par groupes de 5 ou plus - quatre blocs ?
Merci pour vos pensées!
DS
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)OK, sérieusement, votre idée pour le design semble parfaite. Je prendrais approximativement le nombre de niveaux et le multiplierais par 5 pour obtenir le nombre de pistes. (Ça ne le dérangera pas de manger plus de bonbons, hein ?)
Remplacez la colonne de réponse par le type de modélisation Nominal. Vous pouvez également supprimer la propriété de la colonne Response Limits. Cette analyse est mieux gérée dans Analyser > Ajuster Y par X. Cette direction vous mènera à la plate-forme de contingence.
Re : Le DOE teste la capacité du dégustateur à prédire la couleur des bonbons (pour les enfants)Je dirai simplement qu'aucune quantité de preuves empiriques ne convaincra les enfants que leur théorie est fausse !