"Sehr breiter" PLS-Datensatz?<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />Hat jemand einen "sehr breiten" Datensatz, der sich für die PLS-Modellierung eignet?
Ein Kunde hat einen Spektraldatensatz mit 3500 Spalten (Wellenlängen), 70 Zeilen und 1 Antwort zur Vorhersage. Sie haben versucht, ein PLS-Modell in JMP zu erstellen, und es war extrem langsam (10 Minuten). Ich möchte nachforschen, aber der Kunde kann mir die Daten nicht geben (auch nicht anonymisiert!). Hat jemand einen Datensatz von vergleichbarer Größe? Alle meine Aktienbeispiele sind viel kleiner.
Bitte lassen Sie mich wissen, wenn Sie Ideen zur Geschwindigkeit der Anpassung haben. Die andere Software des Kunden passte das Modell in << 1 Minute an. Wäre Pro anders? Gibt es Optionen, die helfen würden?
Vielen Dank,
Phil
Betreff: "Sehr breiter" PLS-Datensatz?Danke, Scott.
Das ist einer der Datensätze, die ich mir angesehen habe. Ich bin damit einverstanden, dass es gut ist. Es war jedoch nicht so groß wie der Datensatz des Kunden, da es Hunderte von Spalten anstelle von Tausenden enthält.
Vielen Dank,
Phil
Betreff: "Sehr breiter" PLS-Datensatz?Es ist sinnvoll, da wir JMP jetzt bitten, Modelle für all diese unterschiedlichen Anzahlen von Faktoren über alle 7 Falten in den Daten anzupassen.
Betreff: "Sehr breiter" PLS-Datensatz?Phil und Peter,
Gerecht und zu Ihrer Information:
Ein weiterer guter breiter Datensatz für PLS ist der Benzin-Oktan-NIR-Datensatz.
Es war eines der ersten, das wir in den frühen JMP-Tagen für PLS verwendet haben, aber es ist immer noch sehr gut und repräsentativ für eine gemeinsame laborweite Datensituation.
Lösche es einfach unter t er JMP Technical Reference Library unter den Datentabellenordnern: D50 Benzinoktan NIR (Gardner)
Ich habe die JMP Pro PLS-Funktionen in diesem Fall noch nicht ausprobiert (z. B. Validierung und neuere Anlaysis-Optionen), denke aber, dass dies auch funktionieren würde.
Scott
Betreff: "Sehr breiter" PLS-Datensatz?Ja, die Validierungstechnik spielt eine große Rolle bei der Reaktionszeit. Nur zum Kichern habe ich KFold = 7 anstelle von None gewählt und die Lösung dauerte ungefähr 14 Minuten.
Betreff: "Sehr breiter" PLS-Datensatz?Hallo Peter,
Toller Vorschlag für diesen Datensatz, danke.
Nachdem ich ungefähr gespielt habe (ich habe die Spalte "Alter" als mein Y verwendet), kann ich ungefähr zur gleichen Zeit auch ein 15-Faktor-Modell anpassen. Obwohl ich finde, dass ich mit nur 8 GB RAM in meinem Computer (muss mit der IT darüber sprechen!) Nicht alle 11.000 Kovariaten verwenden kann. Etwa die Hälfte von ihnen ist in Ordnung.
Ob Sie die Validierung verwenden oder nicht, hat einen großen Einfluss. Wenn ich nach einer LOO-Validierung frage, wird alles zum Stillstand gebracht. Ich denke, das hat der Kunde in JMP gemacht. Und möglicherweise hat das Modell, das der Kunde in seine andere Software eingepasst hat, keine Validierung verwendet.
Dies hat mir einige nützliche Möglichkeiten gegeben, die ich erkunden kann.
Danke noch einmal,
Phil
Betreff: "Sehr breiter" PLS-Datensatz?OK ... Ich habe gerade eine einfache numerische Antwort erstellt, die eine der Kovariaten x 3 war, also eine geradlinige Beziehung, sodass ETWAS zu finden war ... habe alle fast 11.000 Kovariaten, JMP Pro, meine Maschine, Keine zur Validierung verwendet ... und ich denke, dieses eine ist der Schlüssel ... unter Verwendung der PLS-Persönlichkeit in Fit Model, ohne X zu standardisieren, und es dauerte ungefähr 15 Sekunden, um eine 15-Faktor-Lösung zu finden.
Betreff: "Sehr breiter" PLS-Datensatz?Phil:
Ein Datensatz, der sofort in den Sinn kommt, ist der Micro Array-Datensatz, der für unsere JMP Pro-Demos der Version 12 von zentraler Bedeutung ist und fast 11.000 numerische kovariate Spalten und 4 kategoriale Antworten enthält. Es dauert vielleicht 4 Sekunden, bis dies auf meinem Windows-Computer für eine Antwort ausgeführt wird. Ich habe noch nie mehrere Antworten ausprobiert. Tatsächlich werde ich am 15. Oktober ein PLS-orientiertes Mastering-Event durchführen, das diesen spezifischen Datensatz mit nur einer Antwort demonstriert, um es einfach zu halten. Ein bisschen ein anderer Datensatz und er läuft auf der Diskriminanzplattform, nicht auf der PLS-Plattform, aber das könnte helfen?
Hier sind die technischen Daten meines Windows-Laptops, wenn dies hilft:
