¿Qué inspiró esta solicitud de lista de deseos?
@FN vinculado a un artículo de scikit-learn en un comentario sobre el Validación para datos de procesamiento continuo página de complementos.Esta es una mejor manera de realizar una validación cruzada con datos de procesos continuos y me recordó que las técnicas utilizadas en ese complemento serían mucho más efectivas y se usarían con más frecuencia si estuvieran integradas en el JMP. Esta situación se aplica a muchos análisis que mis colegas y yo hacemos regularmente con datos de fabricación.
¿Cuál es la mejora que le gustaría ver?
- Incorpore la agrupación por tiempo en el cuadro de diálogo de la columna de validación, incluida una funcionalidad similar a la que se encuentra en el complemento vinculado anteriormente para guiar al usuario a un tamaño de grupo apropiado.
- Agregue una opción para una tabla individual para que la validación cruzada utilizada en todas partes en JMP use un método basado en el tiempo al que se hace referencia en el enlace a continuación en lugar de asignar filas aleatoriamente.
¿Por qué es importante esta idea?
A pesar de @DrewLuebe y creé el complemento de validación vinculado anteriormente específicamente para ayudar a los usuarios a comprender mejor la previsibilidad de los modelos en conjuntos de datos que tienen correlación entre filas, incluida la autocorrelación, el comportamiento de validación cruzada integrado y la validación predeterminada aún usan divisiones por fila.Esto significa que muchas métricas de ajuste de validación informadas son artificialmente mejores que el rendimiento real con nuevos datos.Al integrar estas técnicas en el propio JMP, los usuarios comprenderán mucho mejor sus datos y modelos, independientemente de las herramientas que utilicen.
