附件是两个具有相同数据的 jmp 文件。 唯一的区别是我创建验证列的方式。 在文件“bootstrap test”中,我按照 JMP 文档中提到的步骤创建了验证。 这是该页面的链接
https://www.jmp.com/support/help/14-2/example-of-the-make-validation-column-utility.shtml
在文件“bootstrap test_autovalidation”中,我使用了在 JMP 用户社区页面上找到的插件。 链接在这里
https://community.jmp.com/t5/JMP-Add-Ins/Add-in-To-Support-Auto-Validation-Workflow/ta-p/189991
但是我从这两种分析中得到的结果是不同的。 这种差异是因为设置了验证列还是其他原因? 结果差异的示例,例如如果我查看列贡献,这两种方法都会给我不同的结果。
第一个示例使用 50% 的保留率进行验证。 第二个示例使用 25% 的保留值进行验证。 我不希望得到相同的结果。
将样本中的观察值分配给训练集或验证集是随机的。 所以你不会期待相同的结果。