Estoy realizando un procedimiento paso a paso y evaluando el rendimiento usando un k-fold r-squared. Actualmente, el único r-cuadrado k-fold que se proporciona se promedia en los 5 pliegues. ¿Es posible asegurar el r-cuadrado para cada k-pliegue individual en un modelo?
Hola @bbrown1 ,
Para ver los resultados individuales de cada pliegue, puede intentar utilizar en su lugar la plataforma "Model Screening" ("Analyze", "Predictive Modeling", "Model Screening").
Ingresará sus factores y respuestas, verificará la "validación cruzada de pliegues K", especificará el número de pliegues y simplemente verificará "Ajustar paso a paso" en el menú "Métodos".
Luego, debe tener sus resultados de pliegues individuales para entrenamiento y validación como en esta captura de pantalla:
Tenga cuidado de no hacer una "selección de cerezas" y elija usar el pliegue con los mejores resultados, ya que significará que está eligiendo el conjunto de entrenamiento y validación para obtener los mejores resultados, que no es el objetivo de esta técnica de validación ( y no el objetivo de una validación en absoluto). Es más para evaluar la solidez de un modelo en el contexto de un pequeño conjunto de datos, donde ningún dato se "pierde" o se excluye en el conjunto de validación.
Puede encontrar más información sobre la validación cruzada y la evaluación de modelos en esta discusión: Resuelto: ¿Qué tan buena es la validación cruzada de K-fold para conjuntos de datos pequeños? - Comunidad de usuarios de JMP
Espero que te ayude,
