自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具 (US 2018 130)级别:中级
Milo Page,JMP 研究统计师开发人员,SAS
JMP Pro 14 包括一个新的自动数据插补 (ADI) 实用程序,这是一种多功能、凭经验调整的流式缺失数据插补方法。 我们建议将其作为预测模型拟合的预处理步骤来处理缺失数据。 即使存在丢失数据,它也会根据经验调整您的数据集以提取底层结构。 它还尊重训练和验证分区,并与预测模型无缝对接。 它是使用强大的矩阵完成方法开发的,并添加了一些扩展以实现稳健性和灵活性。 本演讲将重点讨论 ADI 何时适用以及如何在 JMP Pro 14 中使用它。 我还将概述处理缺失值数据的推荐工作流程,并在一些示例中展示 ADI 的性能。

















预测建模爆发回复:自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具 (US 2018 130)你好菲利斯,
我可以帮助解答你的问题,我是 Milo 的博士。导致在 JMP Pro 中创建 ADI 的研究顾问。
如果我理解得很好,你的意思是先将训练集和测试集中的数据分开以估算缺失值。 划分数据后,您是否仅将 ADI 方法应用于训练数据。
工作流程是转到“创建验证列”平台来设置将行划分为训练/验证集的数据表列。 当您启动探索缺失值时,请在验证角色中设置该列。 ADI 算法将 PCA 类型的模型拟合到训练集,并使用验证集来调整模型,例如确定降维的最佳排名。
那么你在验证和测试集上做什么呢?
当我在建模过程的下一步中继续拟合神经网络或引导森林模型等监督学习算法时,我建议使用相同的训练/验证或训练/验证/测试数据分区。 正如预测建模组件一样,插补是建模过程的一部分。 在监督学习步骤中使用相同的行划分为训练/验证/测试集是确保我们对整个建模练习的拟合优度进行相同程度的独立评估的一种方法。
流式估算验证/测试集是什么意思?
也许我们的语言在这里不太清楚。 发生的情况是,ADI 将保存一个公式列,该公式列创建现有列的估算版本。 这意味着您可以使用 Tables<
此过程立即发生在数据 ADI 的训练/验证/测试部分。 因此,您可以使用列的估算版本直接进行建模,而不必过多担心丢失的单元格。 ADI很聪明。 它使用验证行来确定所使用的降维的等级。 如果列是独立的,或者对于线性降级来说太混乱,它会计算出来并简单地估算列的训练平均值。
回复:自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具 (US 2018 130)@米洛已离开 SAS。 也许@chris_gotwalt1可以在这里回答。
回复:自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具 (US 2018 130)再见米洛
我发现你的 pdf 文件非常有趣。
您能否向我提供有关下面这张幻灯片中报告的流程的更多详细信息?
如果我理解得很好,你的意思是先将训练集和测试集中的数据分开以估算缺失值。 划分数据后,您是否仅将 ADI 方法应用于训练数据。 正确的?
那么你在验证和测试集上做什么呢?
流式估算验证/测试集是什么意思?
感谢您的帮助。菲利斯
