Hallo JMP-Team und Community,
Hier sind meine Vorschläge, die sich hauptsächlich auf die Plattform "Model Screening" konzentrieren, aber vielleicht auf andere Plattformen ausgeweitet werden könnten, wenn es relevant ist. Ich hoffe, diese Ideen klingen vielleicht nicht zu verrückt oder "off".
- Was hat Sie zu dieser Wunschlistenanfrage inspiriert?
- Beim Vergleich verschiedener Methoden über die „Model Screening“-Plattform sind die Metriken, die zum Vergleich der Methoden verwendet werden, R² und Mean/Std RASE. Auch wenn es bereits einige Entscheidungen in Bezug auf die „besten Methoden“ anleitet und hervorhebt, kann es manchmal schwierig sein, zu vergleichen und eine Auswahl zu treffen, wenn die Ergebnisse bei mehreren Methoden ähnlich sind.
- Es scheint keinen Hinweis auf die „Komplexität“ der auf dieser Plattform verwendeten Methoden zu geben (vielleicht durch ein Informationskriterium wie AICc/BIC oder eine einfache Rechenzeitmetrik („elapsed time“ verfügbar im roten Dreieck, aber nicht standardmäßig). ), was eine interessante und wichtige Information sein könnte, wenn das Modell in der Produktion verwendet werden soll, wo die Latenz des Modells ein wichtiger Parameter sein könnte.
- Da Nachhaltigkeit heute eine der wichtigsten Prioritäten ist, könnte es schließlich interessant sein, Modelle nicht nur auf ihre „statistische“ Leistung zu vergleichen, sondern auch Rechenzeit/Energieverbrauch durch relevante Metriken zu berücksichtigen.
- Welche Verbesserungen wünschen Sie sich ?
- Wäre es möglich, Grafiken zur Entwicklung von R² für verschiedene Methoden hinzuzufügen, und vielleicht auch eine Grafik mit Mean RASE (und Std RASE als Intervalle in der Grafik), um die Unterschiede zwischen den Methoden besser einschätzen zu können?
- Wäre es möglich, andere Bewertungsmetriken hinzuzufügen, insbesondere eine Metrik, die sich auf die Modellkomplexität konzentriert (standardmäßig AICc/BIC und/oder Berechnungszeit)? Dies kann helfen, ähnliche Modellleistungen zu sortieren, indem die einfachsten gefördert werden (wie es sein sollte, bevorzugen Sie immer sparsame/einfache Modelle, wenn/wenn möglich).
- Da die Rechenzeit einfach erfasst werden kann („elapsed time“ steht in den Optionen des roten Dreiecks zur Verfügung), wäre es toll, diese Information in den Plattformergebnissen als Hinweis auf „Nachhaltigkeit/Komplexität des Modells“ hervorzuheben. Wenn möglich, kann die Verwendung dieser Informationen und der Informationen der von JMP verwendeten Geräte/Geräte/Computer ermöglichen, Indikatoren zu erstellen, wie z. B. die Open-Source-Initiative „Code Carbon“, die CO2-Emissionen basierend auf Rechenzeit, GPU/CPU, Energie bereitstellt Verbrauch : Motivation — CodeCarbon 2.0.0 Dokumentation (mlco2.github.io)
- Warum ist diese Idee wichtig?
- Da JMP für seine grafikübergreifende Interaktivität und seine Benutzerfreundlichkeit/den einfachen Zugriff durch hilfreiche Grafiken bekannt ist, die Nicht-Statistikern helfen, die relevanten Informationen zu erhalten, wäre es interessant, einige Visualisierungen in der „Model Screening“-Plattform hinzuzufügen, da die verfügbaren Grafiken sind "nur" "Actual by Predicted" und "Profiler". Möglicherweise fehlt es an Visualisierung für den Entscheidungsprozess über die Wahl der Methode.
- Da sich JMP an Ingenieure und Wissenschaftler richtet, kann es hilfreich sein, eine klare Vorstellung von der Komplexität eines Modells zu haben, um den besten Kompromiss zwischen Präzision, Erklärbarkeit und Geschwindigkeit zu finden. Das Hinzufügen einer Komplexitätsmetrik kann JMP-Benutzern auch dabei helfen, sie nicht nur für Erkundungs-/Entdeckungszwecke in Betracht zu ziehen, sondern auch als Prototyping-Tool für den Produktionsmodus, bei dem die Modelllatenz ein wichtiger Faktor ist.
- JMP hat bereits viele Menschen in seiner Community, die sich engagiert oder leidenschaftlich für die Umwelt einsetzen. „Data for Green“ unterstreicht auch das Engagement von JMP für Nachhaltigkeit und Umwelt. In der Lage zu sein, auf dieser Plattform Informationen bereitzustellen, die die Auswirkungen hervorheben und dazu beitragen können, Methoden basierend auf einer relevanten Metrik zu differenzieren, scheint eine große Chance und ein wichtiges Unterscheidungsmerkmal im Vergleich zu anderer Software zu sein, sowie das Bewusstsein zu schärfen.
Wir freuen uns auf Ihr Feedback, und wenn die Leute daran interessiert sind, einen Kommentar abzugeben, fühlen Sie sich frei 
Frohes neues Jahr und alles Gute,
