我們收到審稿者意見如下:
為了確認截止值的效用,需要進行驗證。然而,在這個隊列中,沒有進行驗證分析。由於樣本量較小,很難進行外部驗證研究。然而,內部驗證(或交叉驗證)分析可能可以透過留一法或 k 折交叉驗證方法等統計方法進行。
我無法理解審稿人想要的統計方法。
你能用JMP解決這個問題嗎?
@Marimo ,
留一法是 k 重交叉驗證的一種版本,其中資料集中的所有行一次一次用作驗證「集」。
例如,如果您的資料集中有 20 行,您可以採用 k 倍 5 交叉驗證,這將使用 20% 的資料 5 次。在這種情況下,將有 4 行用於交叉驗證,16 行用於訓練。
每 20% 的人都使用一種稱為放回抽樣的方法來嘗試確保所有資料都包含在 5 個 k 折疊之一中。此範例中的另一個選項是進行 k 倍 20,然後使用資料集的每一行作為驗證集。折疊數越高,用於交叉驗證的資料百分比就越低。 K 折交叉驗證可在 JMP 的大多數平台中找到。
另一種選擇是使用像 Bootstrap Forest 這樣的方法,該方法在演算法中內建了替換採樣。您需要 JMP Pro 才能充分利用該平台。 Bootstrap Forest 透過使用不同的資料子集來建立許多較小的模型(樹),使用模型平均來尋找資料集中最重要的變數。
華泰
帳單
問題:如果我有 20 行並使用 K=20 折疊,這與「留一法」驗證完全相同嗎?我一直認為後者使用每個觀察結果作為驗證集(在整個資料集中輪換),而 K 倍樣本則帶有 replacement ,所以我不清楚每個觀察結果都用於驗證。你能澄清一下嗎?
嗨@Marimo ,
歡迎來到社區!
以下是我在上一篇文章中提供的有關驗證、特定驗證方法的使用以及如何在 JMP 中執行此操作的一些信息: https://community.jmp.com/t5/Discussions/CROSS-VALIDATION-VALIDATION -COLUMN-方法/mp/588349/highlight/true#M79332
我希望第一個答案對你有幫助