Re: 検証列として使用することを意図していないデータの分割これを内部で記録し、上記の欠陥 ID を追加しました。
@リース_sj 、このリクエストの 2 番目の部分 (つまり、モデル検証のためのバッグ外見積もり) の新しいアイテムを入力していただけますか? これらは 2 つの異なる要求です。
ありがとう!
検証列として使用することを意図していないデータの分割検証列: 多くの場合、トレーニング セットとテスト セットでデータを分割する必要がありますが、モデルの選択に使用される検証セットには分割しません。 これは JMP では機能しません。 たとえば、NN や GLR などの相互検証を使用できるモデル化方法で、トレーニング データに基づいてモデルの選択/検証を行い、実際にはモデルをテストするためだけにテスト データを使用します。 さらに、テスト データが除外されると、ブースティング ツリーとランダム フォレストは、除外されたデータを使用してモデルを検証します (おそらく NN の場合)。 これには、モデリング用のテスト データを削除し、後でモデル比較用に再度追加する追加の手順が必要です。
統計と分析Re: 検証列として使用することを意図していないデータの分割 - ステータスが次のように変更されました: 現時点では計画されていません@リース_sj検証データが不正であるという懸念はありますか?モデルがいつデータに最も適合したかを決定する方法を提案しますか?多くの場合、テスト セットのない検証データのみが表示されますが、その逆は見られません。JMP には、なんらかの形式の検証またはホールドバックなしに NN を適合させる方法がありません。アルゴリズムをトレーニング データにできる限り適合させると、オーバーフィット モデルになる可能性が高くなります。モデルを作成して式デポに公開し、モデルがどれだけ適合するかを確認したい場合は、テスト データ セットで実行します。