ホールドアウトセットのモデル精度を評価する方法こんにちは、
私はJMP 13を使用していますが、ホールドアウトセットでモデルの精度を自動的に評価する方法を見つけることができないようです。線形回帰モデルを構築しています。
そのため、トレーニングセットではビュレットであったモデル(含まれる効果と推定サイズ)を保存しますが、ホールドアウトセットでは精度予測子(R ^ 2、R ^ 2調整済み、RMSE)を計算します。現時点で私が見つけた唯一の解決策は、RMSEを「手作業で」計算することです。これは、残差を計算できるためです。これを自動的に行う方法はありますか?
これは、モデル構築プロセスのこのような基本的な操作のように思えるので、適切なオプションがあるはずです。
ご協力ありがとうございました、
ダニエル
日時:ホールドアウトセットのモデル精度を評価する方法予測モデルの正直な評価を自動的に実行する機能は、JMP Proの機能です。JMP Proの[モデルの適合]起動ダイアログには、JMPでは使用できない検証分析の役割があります。
Tabulateプラットフォームを使用すると、RMSEの推定が簡単になる場合があります。グループ化に検証列を使用し、保存された残差の標準偏差を表にします。