自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具 (US 2018 130)级别:中级
Milo Page, JMP Research Statistician Developer, SAS
JMP Pro 14 包括一个新的自动数据插补 (ADI) 实用程序,这是一种多功能、经验调整、流式传输、缺失数据插补方法。 我们建议将其作为预测模型拟合的预处理步骤来处理缺失数据。 即使存在缺失数据,它也会根据经验调整您的数据集以提取底层结构。 它还尊重训练和验证分区,并与预测模型无缝连接。 它是使用强大的矩阵完成方法开发的,并添加了一些扩展以提高鲁棒性和灵活性。 本次演讲将重点讨论 ADI 何时适用以及如何在 JMP Pro 14 中使用它。 我还将概述处理缺失值数据的推荐工作流程,并通过一些示例展示 ADI 的性能。

















爆发预测建模回复:自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具(US 2018 130)你好菲利斯,
我可以帮助您解决问题,我是 Milo 的博士。在 JMP Pro 中创建 ADI 的研究顾问。
如果我理解得很好,您是说在训练和测试集中拆分数据以估算缺失值。 划分数据后,是否仅将 ADI 方法应用于训练数据。
工作流程是到 Make Validation Column 平台设置数据表列,将行划分为训练/验证集。 当您启动探索缺失值时,将该列设置为验证角色。 ADI 算法将 PCA 类型的模型拟合到训练集,并使用验证集来调整模型,以识别降维的最佳等级。
那么你在验证和测试集上做了什么?
当我在建模过程的下一步继续拟合监督学习算法(如神经网络或引导森林模型)时,我建议对数据使用相同的训练/验证或训练/验证/测试分区。 插补是建模过程的一部分,就像预测建模组件一样。 在监督学习步骤中使用相同的行划分为训练/验证/测试集是一种确保我们对整个建模练习的拟合优度具有相同程度的独立评估的方法。
流式估算验证/测试集是什么意思?
也许我们的语言在这里不清楚。 发生的情况是 ADI 将保存一个公式列,该列创建现有列的插补版本。 这意味着您可以使用 Tables<
此过程立即发生在数据 ADI 的训练/验证/测试部分。 因此,您可以直接使用列的估算版本进行建模,而不必过多担心丢失的单元格。 ADI 很聪明。 它使用验证行来确定使用的降维的等级。 如果列是独立的,或者对于线性降级来说过于混乱,它会计算出来并简单地估算列的训练平均值。
回复:自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具(US 2018 130)@米洛离开了 SAS。 也许@chris_gotwalt1可以在这里回答。
回复:自动数据插补:JMP® Pro 14 中用于处理缺失值的多功能工具(US 2018 130)乔米洛
我发现你的 pdf 文件很有趣。
您能否给我更多关于下面这张幻灯片中报告的过程的详细信息?
如果我理解得很好,您说的是在训练和测试集中拆分数据以估算缺失值。 划分数据后,是否仅将 ADI 方法应用于训练数据。 正确的?
那么你在验证和测试集上做什么呢?
流式估算验证/测试集是什么意思?
谢谢你的帮助。菲利斯
