Probleme mit der ReproduzierbarkeitIch unterrichte mit JMP und bin in den folgenden Fällen auf einige Reproduzierbarkeitsprobleme aufmerksam geworden:
1) Meine Studenten, die unterschiedliche Betriebssysteme wie Windows und macOS verwenden, erhalten von Modellen, die eine Randomisierung wie NN erfordern, unterschiedliche Ergebnisse, selbst wenn sie denselben Zufallsstartwert wie 123 verwenden. Dieses Problem ist frustrierend, da Aufgaben, die aus Gründen der Reproduzierbarkeit einen Zufallsstartwert verwenden, eine eindeutige wahre Lösung zum Vergleich haben sollen und unterschiedliche Ergebnisse die Studenten verwirren.
2) Einige Methoden wie SVM verfügen über ein herkömmliches Tuning-Design, um eine gute Parameterkombination zu finden. Allerdings wird in der Tuning-Design-Schnittstelle keine Option für einen Zufallsstartwert angeboten, was zu unterschiedlichen Ergebnissen führt, die wiederum die Studierenden verwirren.
Ich bin nicht sicher, ob es sich um bekannte Probleme handelt. Trotzdem freue ich mich über Feedback, das diese Probleme beheben kann.
macOSPrädiktive Modellierung und maschinelles LernenErgebnisse teilen und kommunizierenWindowsBetreff: Probleme mit der ReproduzierbarkeitHallo @onurseref ,
Ich denke, das ist ein guter Fall, den Sie unserem Support-Team unter support@jmp.com vorlegen sollten. Wenn Sie ihnen eine E-Mail schicken, helfen sie Ihnen gerne weiter.
Danke,
Ben
Betreff: Probleme mit der ReproduzierbarkeitHallo @onurseref , für die Optimierung von SVM oder andere Szenarien, in denen innerhalb der Modellierungsplattform kein Zufallsstartwert verfügbar ist, können Sie und Ihre Schüler das Add-In „Random Seed Reset“ verwenden. Legen Sie vor dem Start der Plattform einen Zufallsstartwert fest, und Sie erhalten jedes Mal dasselbe SVM-Optimierungsdesign.
Auf der Add-In-Seite wird ein bekanntes Problem mit Zufallszahlen auf verschiedenen Rechnern und Betriebssystemen erwähnt. Wie Ben bereits vorgeschlagen hat, erhalten Sie weitere Informationen hierzu von unserem technischen Support.
Betreff: Probleme mit der ReproduzierbarkeitDanke @Ross_Metusalem für die Lösung mit dem Random Seed Reset Add-in. Ich werde es mal ausprobieren und sehen, ob es einige der Reproduzierbarkeitsprobleme lindert. Mir ist bewusst, dass aufgrund von Architekturunterschieden zwischen Betriebssystemen weiterhin Probleme bestehen können. Ich drücke die Daumen.
Betreff: Probleme mit der ReproduzierbarkeitUnterschiedliche CPU-Architekturen führen zu unterschiedlichen Ergebnissen eines Zufallszahlengenerators, selbst bei gleichem Startwert. In diesem Fall eine M-Serie-CPU von Apple im Vergleich zu einer x86-CPU von Intel und einer x86-CPU von AMD. Sie könnten beispielsweise Ergebnisse für M-Serie-MacOS, Windows Intel und Windows AMD mit demselben Startwert für Ihre Aufgaben generieren.
Betreff: Probleme mit der ReproduzierbarkeitVielen Dank, @Ben_BarrIngh , wir haben es für weitere Gespräche mit diesem Kunden aufgegriffen.
Prost,
-Patrick Giuliano (Technischer Support von JMP)
