Estoy realizando un procedimiento paso a paso y evaluando el rendimiento usando un k-fold r-squared. Actualmente, el único r-cuadrado k-fold que se proporciona se promedia en los 5 pliegues. ¿Es posible asegurar el r-cuadrado para cada k-pliegue individual en un modelo?
Hola @bbrown1 ,
Para ver los resultados individuales de cada pliegue, puede intentar utilizar en su lugar la plataforma "Model Screening" ("Analyze", "Predictive Modeling", "Model Screening").
Ingresará sus factores y respuestas, verificará la "validación cruzada de pliegues K", especificará el número de pliegues y simplemente verificará "Ajustar paso a paso" en el menú "Métodos".
Luego, debe tener sus resultados de pliegues individuales para entrenamiento y validación como en esta captura de pantalla:
Tenga cuidado de no hacer "cherry picking" y elija usar el pliegue con los mejores resultados, ya que significará que está eligiendo el conjunto de entrenamiento y validación para obtener los mejores resultados, que no es el objetivo de esta técnica de validación. Es más para evaluar la solidez de un modelo en el contexto de un pequeño conjunto de datos, donde ningún dato se "pierde" o se excluye en el conjunto de validación.
Puede encontrar más información sobre la validación cruzada y la evaluación de modelos en esta discusión: Resuelto: ¿Qué tan buena es la validación cruzada K-fold para conjuntos de datos pequeños? - Comunidad de usuarios de JMP
Espero que te ayude,
