Conférencier | Transcription |
| Stan Young | haha. |
| Sara Doudt | vous permettre de le faire. |
| Stan Young | voir tout maintenant. |
| D'accord, oh non, est-ce que je vais faire défiler les diapositives de mon côté. |
| Sara Doudt | ouais ouais, comme tu le ferais pour une réunion normale. |
| Et voilà, ok, cool, assure-toi d'avoir tout si je suis à proximité. Okay, nous enregistrons, j'en ai besoin, je vais, je vais éteindre ma caméra juste pour info et ensuite. |
| D'accord. |
| Stan Young | Pour que ce soit en plein écran, il suffit maintenant de trier. |
| de la façon de faire cela la seconde. |
| Sara Doudt | c'est ce fond comme là, où il est écrit des notes sur leur conduite au 34%, c'est celui qui ressemble à un. |
| En bas du bateau, oui, désolé pour celui-là, mauvais, de l'autre côté de la personne. |
| Un oui, ce type. |
| Stan Young | haha. |
| Sara Doudt | Vous y allez, et je veux dire, je vais y aller, nous allons commencer dans une seconde mais je vais me rencontrer, avez-vous des questions avant de commencer. |
| Stan Young | ou pas vraiment, vas-tu m'enregistrer ainsi que les diapositives. |
| Sara Doudt | ouais ouais, ils ont demandé que tu aies le. |
| La caméra ici. |
| Au-dessus, c'est bien. |
| Droite. |
| D'accord. |
| Stan Young | Je suis prêt à partir. |
| Sara Doudt | Je vais me mettre en sourdine, et si vous avez des questions ou si vous avez besoin d'arrêter, faites-le-moi savoir mais sinon je vous le ferai. |
| Stan Young | Aller. |
| Je vais présenter aujourd'hui les compléments et scripts JMP pour l'évaluation de plusieurs études. Ou vous pouvez appeler cela comment attraper les pirates informatiques, les gens qui trichent avec des statistiques, ou pourquoi la plupart des affirmations scientifiques sont fausses. |
| Je vais d'abord décrire les pièces du puzzle et comment elles s'emboîtent. La plupart des affirmations ne parviennent en réalité pas à se reproduire. Ce sont des affirmations scientifiques. |
| Je prétends, et mes co-auteurs le soutiennent, que cela est dû au p-hacking et que c'est un problème majeur. Nous allons utiliser la méta-analyse et les tracés de valeur P pour les attraper, voici donc comment attraper un escroc. |
| Les compléments et scripts JMP sont des valeurs P issues des ratios de risque et des limites de confiance. Ils sont issus d’une méta-analyse. |
| Et puis la combinaison des valeurs P par Fisher, une technique ancienne similaire à la technologie de méta-analyse. Et puis nous allons présenter un graphique de valeur p, et nous avons un petit script qui va nettoyer cela et en faire un graphique présentable. |
| image. |
| Eh bien, nous voyons un lapin dans le ciel. Il y a beaucoup de nuages dans le ciel, et si vous vous asseyez par une belle journée et regardez autour de vous, vous pourrez probablement trouver un lapin. |
| Il s'agit donc d'un événement aléatoire. Bien entendu, les lapins ne sont pas réellement dans le ciel. |
| Gelman et Loken ont en fait publié un petit article et parlent de la crise statistique dans la science, de sorte que les gens utilisent les statistiques, disent-ils, de manière incorrecte et c'est de cela dont nous parlerons aujourd'hui. |
| Faisons une expérience épidémiologique. |
| Nous avons des dés à 10 faces, rouges, blanches et bleues. Ils deviendront des chiffres (.046 dans ce cas particulier). Regardons simplement cela se produire sous nos yeux. |
| Nous avons maintenant une valeur P. C'est aléatoire. Vous l'avez fait vous-même. C'est tellement amusant, pourquoi ne pas le refaire une fois de plus ? |
| Rouge blanc, |
| et bleu. |
| Maintenant, si vous faites cela 60 fois, vous pouvez remplir le tableau ici. Il s'agit d'une simulation que j'ai réalisée avec un dé à 10 faces. Et vous pouvez voir les valeurs P sur quatre colonnes et 15 lignes. Cela fait donc 60 valeurs P. Ma plus petite valeur P est de 0,004. |
| Et avec 60 valeurs P, vous pouvez calculer les probabilités. Environ 95 % du temps, vous aurez au moins une valeur P inférieure à 0,05. |
| En voici un réalisé par ma fille. Elle avait trois valeurs P inférieures à 0,05 ; ils sont encerclés ici. Et puis mener une expérience épidémiologiste est si simple |
| que même ma femme Pat peut le faire, et elle a ici trois articles potentiels qu'elle pourrait écrire en lançant des dés et en racontant une bonne histoire. |
| Les valeurs P sont associées à une valeur attendue. Donc, à droite, nous avons des valeurs P de 0,004, 0,016 et 0,012. Un écart normal est attaché à chaque valeur P. Vous pouvez voir que mon .004 aurait un écart normal de 2,9 et ainsi de suite. Et à gauche, nous avons |
| la taille de l'échantillon, l'écart attendu et la valeur P attendue pour la plus petite valeur P, puis l'écart. Donc si nous avions 400 |
| questions que nous examinions, la valeur P attendue serait de 0,00487 et l'écart serait de 2,968. C'est maintenant cet écart qui est repris des expériences de base dans les calculs d'une méta-analyse, et nous le verrons au fur et à mesure. |
| Combien d’affirmations en épidémiologie sont vraies ? J'ai publié un article en 2011 et j'ai pris en compte les affirmations formulées dans des études observationnelles. |
| Et pour chaque affirmation des études observationnelles, j’ai trouvé un essai clinique randomisé qui traitait exactement de la même question. Ainsi, dans les 12 études, il y avait |
| 52 affirmations qui pourraient être faites et testées. |
| Si vous regardez la colonne sous positif, aucune de ces 52 affirmations n’est répliquée dans la bonne direction. |
| Les épidémiologistes avaient donc mis 0 sur 52 dans leurs affirmations. Il y avait en fait cinq affirmations qui étaient statistiquement significatives, mais elles allaient dans le sens opposé à ce qui avait été affirmé dans les... dans les études observationnelles. |
| Nous allons regarder un |
| question folle. Les céréales déterminent-elles le sexe humain ? Donc, si vous mangez des céréales au petit-déjeuner, êtes-vous plus susceptible d’avoir un bébé garçon ? Eh bien, c'est ce que disait le premier journal. |
| Cet article a été publié dans la Royal Society B, leur principale revue de biologie. Ainsi, ces trois co-auteurs ont affirmé que si vous mangez des céréales pour le petit-déjeuner, vous êtes plus susceptible d'avoir un bébé de sexe masculin et de manger des céréales pour le petit-déjeuner au moment de la conception et aux alentours de celle-ci. |
| Deux de mes cohortes et moi avons regardé cela, nous avons demandé les données. Nous avons obtenu les données, puis nous avons publié un contre-pied au premier article disant que la sélection du sexe induite par les céréales est très probablement un faux positif de tests multiples. |
| juste avant la conception... conception prévue, et juste au moment de la conception. Et il y avait 131 aliments dans chacun de ces questionnaires, soit un total de 262 tests statistiques. |
| Vous calculez les valeurs P pour ces tests, les classez du plus petit au plus grand et les tracez par rapport aux nombres entiers (c'est le classement en bas), |
| vous voyez à quoi ressemble une assez bonne ligne à 45 degrés. Nous envisageons donc une distribution uniforme. Maintenant, leur affirmation venait du coin inférieur gauche et ils ont dit, eh bien, voici une petite valeur P. La petite valeur P indique que manger des céréales... les céréales du petit-déjeuner entraîneront davantage de |
| garçons bébés. |
| Il s’agit clairement d’un faux positif statistique. |
| Graphiques de valeur P. Nous allons donc beaucoup utiliser les tracés de valeur P. Sur la gauche, nous voyons un tracé de la valeur P pour une hypothèse nulle probablement vraie. |
| L'entraînement physique à long terme des personnes âgées n'entraîne pas de mortalité ni de risque de mortalité. À droite, nous avons le tabagisme et le cancer du poumon. |
| Et nous voyons toute une série de valeurs P assez proches de zéro, tout au long de la page, ainsi que quelques retardataires en haut à droite. L'image de droite est donc la preuve d'un effet réel et l'image de gauche confirme l'hypothèse nulle, aucun effet. |
| parlons d'une méta-analyse car je vais les utiliser au cours de cette conférence. Sur la gauche, nous voyons un entonnoir et de nombreux papiers tombent dans l'entonnoir. |
| L'épidémiologiste ou quiconque effectue la méta-analyse sélectionne ce qu'il pense être des articles de haute qualité et les utilise pour une analyse plus approfondie. A droite, on voit le... genre de |
| hiérarchie des preuves. Une méta-analyse sur de nombreuses études est envisagée |
| des informations de haut niveau, puis en bas, des opinions d'experts, etc. Alors plus tu montes dans la pyramide, |
| les gens prétendent que les preuves sont meilleures. |
| Nous allons examiner deux exemples de documents de méta-analyse. Le premier article est d’Orellano. |
| oxyde nitrique, ozone, |
| petites particules et ainsi de suite. Et il a rassemblé des données de partout dans le monde. |
| monde, et cela a été parrainé par le |
| L’OMS, c’est donc un financement de haute qualité, un papier de haute qualité. |
| Et c'est une méta-analyse. Nous allons voir si les affirmations de cette méta-analyse tiennent la route. |
| Celui du bas était vraiment drôle. Modèles de consommation de viande rouge et transformée et risque de cancer du poumon et de crise cardiaque. |
| Il y a eu beaucoup de littérature dans la littérature sur la nutrition, disant que vous ne devriez vraiment pas manger de viande rouge. Nous allons voir si cela... si cela a du sens. |
| Revenons en arrière et regardons les pièces du puzzle, puis voyons comment elles s'emboîtent. |
| Nous savons grâce à la littérature ouverte que la plupart des affirmations ne sont pas reproduites. C’est ce qu’on appelle une crise scientifique. Le P-piratage est un problème. Le P-hacking consiste à effectuer de nombreux tests en essayant ceci et cela, puis, lorsque vous trouvez une valeur P inférieure à 0,05, |
| vous pouvez rédiger un article. |
| Nous allons utiliser la méta-analyse et les graphiques de valeur P pour attraper les personnes qui font essentiellement du P-hacking, et j'appelle le P-hacking une sorte de triche avec des statistiques. |
| D'autres sont, vous savez, petits... l'ont décrit un peu différemment. Nous allons utiliser les compléments JMP. Ces compléments JMP ont été écrits par Paul Fogle. |
| Et ils nous permettent de commencer par un document de méta-analyse et de produire rapidement et facilement un graphique de la valeur P. Nous allons également décrire la combinaison des valeurs P de Fisher, puis nous allons... |
| avoir un petit script qui prendra le tracé bidirectionnel qui sort de JMP, puis le nettoiera, de sorte que les marges gauche et droite soient plus... plus attrayantes. |
| Eh bien, voici l'exposition à long terme à la pollution de l'air et |
| provoquant de l'asthme, disent-ils. Sur la gauche, nous avons ce qu’on appelle un arbre. C'est le... |
| ça ressemble un peu à un sapin de Noël. |
| Les valeurs moyennes sont données sous forme de points, puis les limites de confiance sont représentées par des moustaches de chaque côté. À gauche se trouvent les noms des articles... les articles sélectionnés par ces auteurs et à droite, les |
| les ratios de risque et les limites de confiance. Désormais, vous pouvez souvent simplement supprimer les ratios de risque et les limites de confiance et les placer dans un |
| Ensemble de données JMP, et nous voyons donc l'ensemble de données JMP sur la droite. |
| Maintenant, le tracé de la valeur P. |
| quelque chose écrit par Paul Fogle va convertir ces ratios de risque et P... et limites de confiance en valeurs P. |
| Ici, nous voyons que cela a été fait. |
| Les limites de confiance peuvent vous donner l’erreur type. |
| Avec le rapport de risque et l'erreur type, vous pouvez calculer une statistique Z. Et puis vous pouvez prendre la statistique Z et obtenir une valeur P. Sur la droite ici, nous voyons un tracé de la valeur P apparaître, tout comme en quelques clics dans JMP. |
| Ici encore, à gauche, nous avons le tracé approximatif de la valeur P, et à droite, après avoir utilisé un petit script, nous ajoutons la ligne zéro, nous ajoutons la ligne pointillée pour 0,05, et nous nettoyons et développons le numéros sur le |
| Axes X et Y. Et donc nous pouvons regarder maintenant et juger toutes les études qui étaient dans cette chose, mais nous voyons une chose plutôt étrange. On voit que le |
| tout cela ici, il y a quelques valeurs P inférieures à 0,05, puis beaucoup de valeurs P qui augmentent, et nous nous trouvons donc dans une situation ambiguë. |
| Certaines valeurs P semblent être correctes, tandis que d'autres semblent être simplement des résultats aléatoires. |
| Jetons un coup d'œil à la combinaison des valeurs P de Fisher. A gauche, nous avons la formule. Vous prenez la valeur P, prenez le journal naturel, qui les résume par -2. |
| Et cela vous donne un chi carré. Vous recherchez le Chi carré dans le tableau. Donc cette... cette méta-analyse, nous avons les valeurs P. Sous la valeur P, nous avons -2ln, et vous voyez qu'il existe peu de valeurs P petites qui ajoutent considérablement à la somme. |
| Si vous réfléchissez un peu, la somme est comme toutes les sommes, elle est sujette à des valeurs aberrantes manipulées... modifiant considérablement la balance. |
| Ainsi, les quelques petites valeurs P (0,0033, 0,0073) s’ajoutent considérablement à la somme du Chi carré. En fait, la sommation n’est pas robuste. Une valeur aberrante... une valeur aberrante extrême peut faire basculer l'ensemble... toute l'équation. |
| Gardez maintenant à l’esprit que le P-hacking peut conduire à de petites valeurs P et aussi, |
| Très souvent, si une étude s'avère peu significative, les scientifiques ne la publient tout simplement pas. |
| Et s’ils trouvent quelque chose d’important, ils le feront généralement. Il y a donc un biais de publication. Toute la littérature est jonchée de petites valeurs P |
| et c'est probablement... c'est la pointe de l'iceberg. Sous l’iceberg se trouvent toutes les publications qui auraient pu avoir lieu, mais elles n’étaient pas statistiquement significatives. |
| Nous allons maintenant examiner une étude sur la pollution de l'air. Mustafique en 2012 |
| a publié un article dans JAMA et il a examiné les six pollutions atmosphériques typiques |
| monoxyde de carbone, oxyde d'azote, petites particules (c'est-à-dire PM 2,5), dioxyde de soufre, etc. |
| Si vous regardez ces graphiques de valeur P, ils ressemblent tous essentiellement à des bâtons de hockey. Il existe un certain nombre de valeurs P inférieures à 0,05. |
| Mais il existe ensuite un nombre important de valeurs P qui augmentent le long d’une ligne de 45 degrés, indiquant qu’il n’y a aucun effet. |
| Nous prétendons qu'il s'agit d'un mélange. Nous examinons un mélange d’études significatives et d’études non significatives. |
| Et nous affirmons en outre que les études significatives proviennent en grande partie du P-hacking. Il existe d’autres moyens de le faire, mais nous pensons que le P-hacking est la solution. Donc si vous regardez à gauche ici, |
| dans la case rouge, on donne le nombre médian |
| de modèles ou de tests qui pourraient être menés dans le cadre d'une étude, les études qui figuraient dans l'article de Mustafic. |
| Nous avons compté le nombre de |
| résultats, prédicteurs et covariables, et si vous multipliez tout cela par le nombre médian, que nous appelons l'espace de recherche, l'espace de recherche médian est de 12 288. |
| Cela signifie que les auteurs ont eu, en moyenne, 12... dans la médiane, 12 000 occasions d'obtenir une valeur P inférieure à 0,05. Ils disposaient d’une marge de manœuvre importante pour obtenir un résultat statistiquement significatif. |
| Nous allons examiner ici le simple comptage pour les études nutritionnelles. Nous avons donc ici 15 études. Les auteurs, ou les premiers auteurs de l'article. |
| Et puis, en haut, vous voyez les résultats, les prédicteurs, les covariables, les tests, les modèles et l'espace de recherche. Les résultats, s'ils examinaient trois résultats en matière de santé, par exemple Dixon, et s'ils en avaient 51 |
| les aliments dans leur étude, qui seront... ce seraient des prédicteurs. Maintenant, s'ils utilisent des covariables, |
| cela ajouterait considérablement à l’espace de recherche. Et vous pouvez voir que pour Dixon, en théorie, il avait 20 millions d'analyses possibles qu'il aurait pu faire. |
| Et si vous parcourez la colonne de l’espace de recherche, vous pouvez voir un nombre important d’analyses possibles qui pourraient être effectuées. |
| Les études nutritionnelles ont été réalisées avec des cohortes. Une cohorte est un groupe de personnes rassemblées, |
| ils sont d'abord mesurés par des questions, puis ils attendent au fil du temps et enfin ils examinent les effets sur la santé. |
| Chacune de ces cohortes porte le nom d'un ensemble de données qu'elle utilise. |
| Et les cohortes, une fois rassemblées, peuvent être utilisées pour poser, vous savez, des millions de questions. |
| Si |
| la valeur P pour l'une de ces questions est significative |
| et ils ont l'impression qu'ils peuvent rédiger un article, ce qui est souvent le cas. |
| Ainsi, dans les deux dernières colonnes, on voit le nombre d'articles |
| cela pourrait survenir. C'est plus... nous avons utilisé Google Scholar et nous l'avons vérifié. Voilà donc le nombre d'articles parus dans la littérature |
| associés à chacune de ces cohortes. J'ajouterai que nous avons examiné beaucoup de ces articles et qu'aucun de ces articles ne contient d'ajustement pour plusieurs tests ou plusieurs modélisations. |
| L'épidémiologie nutritionnelle, l'épidémiologie environnementale, ce sont celles dont nous avons parlé ici. L'épidémiologie nutritionnelle utilise un questionnaire, le questionnaire de fréquence alimentaire (FFQ). |
| Dans un FFQ, vous pouvez manger un certain nombre d'aliments. |
| Au départ, ils ont commencé avec 61 aliments et j'ai vu des études FFQ où il y avait 800 aliments. Je ne voudrais pas être celui qui remplit ce questionnaire. |
| Mais voici le nombre de journaux qui utilisent les FFQ au fil du temps. |
| Depuis 1985... la technique a été inventée en 1986... depuis 1985, il y a eu 74 000 articles FFQ, et d'après notre examen, aucun de ces articles n'a été ajusté pour de multiples tests et tous disposaient d'espaces de recherche statistique considérablement importants. . |
| En épidémiologie environnementale, j'ai simplement fait une recherche Google sur le mot « pollution de l'air » dans le titre de l'article. |
| Et nous constatons ici qu'au fil du temps, 28 à 29 000 articles ont été rédigés sur la pollution de l'air. |
| Pour autant que je sache, sur la base de nombreuses recherches, aucun de ces articles ne s'adapte à plusieurs tests ou modélisations multiples, et tous ces articles ont de grands... essentiellement, tous ces articles ont de très grands espaces de recherche. |
| La méta-analyse est appelée revue systématique et méta-analyse et, récemment, à partir de 2005, |
| les journaux ont |
| a utilisé ce terme dans le titre de l’article. Ainsi, à partir de 2005, j'ai demandé si les mots « revue systématique » et « méta-analyse » apparaissaient dans le titre de l'article, et vous pouvez voir que cela a commencé avec un faible volume de 1 500 articles par an. |
| 1 500 articles au cours de cette période de cinq ans et enfin en 2021, il y a |
| Il y a eu un total de 27 000 journaux, c'est donc une industrie artisanale. Ces papiers peuvent être produits relativement facilement. |
| Une équipe, souvent composée de 10 ou 5 à 15 personnes en Chine, peut réaliser une méta-analyse par semaine. |
| Et leur salaire dépend du nombre d'articles qu'ils publient, etc. |
| Pour autant que je sache, ce sont toutes... la moitié de ces études sont des études observationnelles et l'autre moitié... proviennent d'essais cliniques randomisés. |
| Pratiquement aucun d'entre eux, et dans tous ceux que nous avons examinés jusqu'à présent, en particulier dans les études observationnelles, n'a l'air d'un bâton de hockey, comme s'il y avait des valeurs P qui sont petites et un tas de valeurs P qui semblent complètement aléatoire. |
| Je dirai que toutes... essentiellement toutes ces études sont financées par vos impôts ou par l'argent des contribuables de quelqu'un. Ils sont largement financés par les deniers publics, c'est une façon de le dire. |
| De nombreuses affirmations n’ont aucun support statistique. Les documents de base ne corrigent pas les tests multiples et les modélisations multiples. Les documents de base disposent de grands espaces de recherche d’analyse. |
| Et nous avons vu des exemples issus de l'épidémiologie environnementale et de l'épidémiologie nutritionnelle selon lesquels la plupart des gens, je dirais sur la base des preuves, ne sont pas fiables. |
| Je dis et d'autres l'ont dit aussi, nous avons un désastre scientifique et statistique et l'utilisation de méta-analyses et de graphiques de valeurs P, ces affirmations peuvent être vérifiées ou non. |
| Nous avons ici quatre situations de smog. En haut à gauche : Londres 1952 ; |
| à droite, Los Angeles 1948. |
| En bas à gauche, c'est Singapour et je ne suis pas sûr... Je ne me souviens pas de l'année exacte. Et puis nous avons Pékin. Ce sont récents. |
| Dans le cas du brouillard de Londres, l'analyse statistique des décès... les décès quotidiens et tout indique qu'il y a eu plus de 4 000 décès survenus sur une période de trois ou quatre jours à Londres en 1952. Cela a suscité l’intérêt des épidémiologistes pour savoir qui était le tueur. |
| Sur les trois autres diapositives ou trois autres images, aucune augmentation du nombre de décès n’a été signalée au cours de ces périodes. |
| La sonnerie, c'est qu'à Londres, ils brûlaient du charbon |
| pour le chauffage et tout le reste. Il y a eu une inversion de température et l'affirmation est que l'acide présent dans l'air a été transporté par des particules dans les poumons inférieurs et que les individus sensibles, généralement âgés et faibles, sont morts en nombre croissant, mais cela ne se produit pas actuellement. |
| autour du monde. Il existe toutes sortes de pollutions dans le monde et nous n’observons pas de hausse des taux de mortalité qui y sont associées. |
| Des escroqueries ? Ha ha. J'adore les arnaques. |
| S'agit-il d'arnaques ? La pollution de l’air tue. Toute affirmation d'une étude FFQ, par exemple, si vous buvez du café, vous êtes plus susceptible d'avoir un cancer du pancréas. C'est l'une des affirmations qui n'est probablement pas vraie. |
| Les niveaux naturels d’ozone tuent-ils ? Je pense que ce n'est pas vrai non plus. Oestrogènes environnementaux. Toute affirmation provenant d’une méta-analyse utilisant des études observationnelles. |
| Gardez à l’esprit que les preuves contenues dans la littérature publique montrent que 80 % de toutes les affirmations scientifiques, provenant généralement de l’université, n’ont pas été reproduites lorsqu’elles ont été testées rigoureusement, par exemple dans des essais cliniques randomisés. |
| Émotion et peur. Le but même de la politique pratique est de maintenir la population menacée, effrayée et donc exigeante d'être conduite vers la sécurité en la menaçant avec une série infinie de hobgobelins, tous imaginaires. |
| Flim flam, tromperie, jeux de confiance impliquant... impliquant une persuasion habile ou une manipulation intelligente de la victime. Alors HL Mencken dans les années 1930 a déclaré que la politique pratique est en grande partie une politique de peur. |
| Nous terminons avec les auteurs de ceci dans cet exposé. Je m'appelle Stan Young et je suis joignable à genetree@bellsouth.net. Warren Kindzierski est un épidémiologiste canadien et il travaille en étroite collaboration avec moi depuis quelques années sur des articles qui |
| sont basés sur les choses que nous avons vues ici aujourd'hui. Paul Fogel est un statisticien très intéressant, il vit à Paris et il est à l'origine de la rédaction du |
| compléments et scripts que nous pouvons utiliser. Je dirai que les scripts vous permettront de passer d'une méta-analyse à une évaluation en probablement un peu moins d'une heure. |
| J'aimerais recommander le rapport de la National Association of Scholars, Shifting Sands Report 1, cette URL vous y mènera. |
| Ce rapport est un rapport statistique long et complexe, mais simple, qui parle de la qualité de l'air et des effets sur la santé. |
| Et avec cela, je ferai également l'affirmation suivante : si quelqu'un qui regarde ceci veut essayer ce qui se passe, nous vous donnerons les scripts et les compléments pour JMP et je vous aiderai même. |
| examinez et interprétez votre analyse particulière d’une méta-analyse. Sur ce, je m'arrête et je suis prêt à répondre à toutes vos questions. Merci. |
