附件是兩個具有相同數據的 jmp 文件。 唯一的區別是我創建驗證列的方式。 在文件“bootstrap test”中,我按照 JMP 文檔中提到的步驟創建了驗證。 這是該頁面的鏈接
https://www.jmp.com/support/help/14-2/example-of-the-make-validation-column-utility.shtml
在文件“bootstrap test_autovalidation”中,我使用了在 JMP 用戶社區頁面上找到的插件。 鏈接在這裡
https://community.jmp.com/t5/JMP-Add-Ins/Add-in-To-Support-Auto-Validation-Workflow/ta-p/189991
但是我從這兩種分析中得到的結果是不同的。 這種差異是因為設置了驗證列還是其他原因? 結果差異的示例,例如如果我查看列貢獻,這兩種方法都會給我不同的結果。
第一個示例使用 50% 的保留率進行驗證。 第二個示例使用 25% 的保留值進行驗證。 我不希望得到相同的結果。
將樣本中的觀察值分配給訓練集或驗證集是隨機的。 所以你不會期待相同的結果。