「非常に広い」PLSデータセット?<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />PLSモデリングに役立つ「非常に広い」データセットを持っている人はいますか?
顧客は、3500列(波長)、70行、予測する1つの応答を持つスペクトルデータセットを持っています。 彼らはJMPでPLSモデルを構築しようとしましたが、それは非常に遅かった(10分)。 調査したいのですが、お客様からデータを提供できません(匿名でも!)。 同等のサイズのデータセットを持っている人はいますか? 私の株の例はすべてずっと小さいです。
フィッティングのスピードについて何かアイデアがあれば教えてください。 お客様の他のソフトウェアは、1分以内にモデルに適合しました。 Proは何か違うのでしょうか? 役立つオプションはありますか?
ありがとう、
フィル
Re:「非常に広い」PLSデータセット?ありがとう、スコット。
それは私が見たデータセットの1つです。 私はそれが良いものであることに同意します。 数千ではなく数百の列があるため、顧客のデータセットほど大きくはありませんでした。
ありがとう、
フィル
Re:「非常に広い」PLSデータセット?現在、JMPに、データの7つのフォールドすべてにわたって、これらすべての異なる数の因子のモデルを適合させるように求めているので、それは理にかなっています。
Re:「非常に広い」PLSデータセット?フィルとピーター、
ちょうどそして参考までに:
PLSのもう1つの優れたワイドデータセットは、ガソリンオクタンNIRデータセットです。
これは、JMPの初期にPLSに使用した最初のデータのひとつでしたが、それでも非常に優れており、一般的なラボ全体のデータ状況を表しています。
tの下に出すだけ彼JMPテクニカルリファレンスライブラリデータテーブルフォルダの下: D50ガソリンオクタンNIR(ガードナー)
これでJMPPro PLS機能(検証や新しい分析オプションなど)をまだ試していませんが、同様に機能すると思います。
スコット
Re:「非常に広い」PLSデータセット?はい、検証手法は応答時間に大きな役割を果たします。 笑いのためだけに、NoneではなくKFold = 7を選択し、解決するのに約14分かかりました。
Re:「非常に広い」PLSデータセット?こんにちはピーター、
そのデータセットに対する素晴らしい提案、ありがとう。
遊んだことがあるので(「年齢」列をYとして使用しました)、ほぼ同時に15因子モデルを適合させることもできます。 ただし、マシンにRAMが8 GBしかない場合(それについてはITに相談する必要があります)、11,000個の共変量すべてを使用することはできません。 しかし、それらの約半分は問題ありません。
検証を使用するかどうかは大きな影響を及ぼします。 LOO検証を要求すると、すべてが停止します。 これがお客様がJMPでやっていたことだと思います。 そして、おそらく顧客が他のソフトウェアに適合したモデルは検証を使用していませんでした。
これは私に探求するためのいくつかの有用な道を与えてくれました。
再度、感謝します、
フィル
Re:「非常に広い」PLSデータセット?OK ...共変量x3の1つである単純な数値応答を作成したので、直線の関係であるため、何かを見つけることができました...ほぼ11,000の共変量、JMP Pro、私のマシン、検証にはなしをすべて使用しました...そして私はこれが鍵だと思います...フィットモデルでPLSパーソナリティを使用し、Xを標準化せず、15要素のソリューションを見つけるのに約15秒かかりました。
Re:「非常に広い」PLSデータセット?フィル:
すぐに頭に浮かぶデータセットの1つは、JMP Proバージョン12デモの中心となるマイクロアレイデータセットで、約11,000の数値共変量列、4つのカテゴリ応答があります。 1つの応答のためにそれが私のWindowsマシンで実行されるのにおそらく4秒かかります。 私は複数の応答を試したことがありません。 実際、私は10月15日にPLS指向のマスタリングイベントを実行し、単純にするために1つの応答のみでこの特定のデータセットを示します。 少し異なるデータセットであり、PLSプラットフォームではなく、Discriminantプラットフォームで実行されますが、これは役立つ可能性がありますか?
これが役立つ場合の私のWindowsラップトップの仕様は次のとおりです。
