Tengo un conjunto de datos con 40 espectros NIR con filas como funciones. El conjunto de datos se divide en un conjunto de entrenamiento y validación mediante una columna de validación de punto de corte; Las 10 últimas filas son validación.
Al ejecutar el análisis FPCA, ¿solo se instala el conjunto de entrenamiento como se muestra a continuación? ¿Cómo sabemos si el ajuste del conjunto de validación está bien utilizando el modelo de entrenamiento?
¿No es adecuado para el conjunto de validación?
¿Asumo también que el gráfico de diagnóstico es solo para el conjunto de entrenamiento?
Puntuaciones FPCA: ¿se calculan los resultados del conjunto de validación con el modelo de formación?
¡Gracias por el aporte!
Hola @frankderuyck ,
Estoy de acuerdo, la documentación sobre el uso del conjunto de validación para Functional Data Explorer es un poco confusa acerca de los términos y el uso de los conjuntos: Inicie la plataforma Functional Data Explorer (jmp.com)
Solo se utilizan dos conjuntos posibles en Functional Data Explorer (a diferencia de otros algoritmos de aprendizaje automático que pueden usar 3 conjuntos: conjuntos de entrenamiento, validación y prueba): conjunto de entrenamiento (codificado como 0 o el valor más pequeño) y conjunto de validación (codificado como 1 o valores superiores).
De hecho, el conjunto de validación se usa aquí como un conjunto de prueba (si usamos rigurosamente la convención de nomenclatura correcta): no se usa para ajustar un modelo funcional, pero puede extraer las puntuaciones FPCA de este conjunto para ver qué tan efectivo es el modelo. encajar en nuevos datos funcionales: Resuelto: Análisis y clasificación de datos funcionales: Cómo calcular el FPC de nuevos datos (u... - Comunidad de usuarios de JMP
El conjunto de entrenamiento se utiliza para ajustar y evaluar el ajuste del modelo, y todos los gráficos en el informe que menciona se realizan en el conjunto de entrenamiento.
Puede evaluar el ajuste del modelo en los datos de validación extrayendo la fórmula de predicción en la nueva tabla de datos (triángulo rojo junto a "[Modelo] en [Datos iniciales]" y "Guardar datos"). Se agregan columnas de fórmula (Predicción y Residuales) y, utilizando Graph Builder, puede visualizar el valor real versus el previsto de sus datos de validación, o visualizar los residuos para reproducir los resultados que se ven en el informe:
Pero estoy de acuerdo contigo en que sería mucho más fácil tener los resultados de los datos de validación directamente en la plataforma. Podría ser una buena idea agregarla a la lista de deseos de JMP si aún no está escrita.
Espero que esta respuesta te ayude,
Gran respuesta de nuevo, ¡gracias Víctor!
