Estoy usando la plataforma neuronal para calcular un modelo que hace predicciones a partir de algunos datos observados y quiero comparar el rendimiento de ese modelo con otros modelos (no de JMP). Para comparar los diferentes modelos, quiero comparar los datos observados y las predicciones de los diferentes modelos.
El R2 no es una buena medida porque verifica cualquier relación lineal entre los valores observados y predichos y = ax + b (y = observación) y (x = predicción) y solo me interesa el caso donde a = 1 y b = 0.
(- Pregunta: ¿Importa si miro "observado versus predicho" o "predicho versus observado"?)
Entonces, estoy mirando RMSE y MAD en lugar de R2. (Pregunta: ¿Existe alguna otra medida que se pueda utilizar?)
- Ahora, mirando el manual de JMP encuentro la siguiente definición:
Promedio Abs Dev : El promedio de los valores absolutos de las diferencias entre la respuesta y la respuesta prevista. (Todos los factores son continuos).
Cuando interpreto "respuesta" como el valor observado y "respuesta prevista" como la predicción del modelo, esto se traduciría en la suma de la ecuación (| x_i-y_i |) / n donde n es el número de observaciones.
Sin embargo, mirando fuentes en Internet, esta cantidad se llama error absoluto medio :
En Estadísticas , error absoluto medio ( MAE ) es una medida de errores entre observaciones emparejadas que expresan el mismo fenómeno. Ejemplos de Y versus X incluyen comparaciones de predicciones versus observadas,
wikipedia
Lo mismo aquí :
Error absoluto medio (MAE): MAE mide la magnitud promedio de los errores en un conjunto de predicciones, sin considerar su dirección. Es el promedio sobre la muestra de prueba de las diferencias absolutas entre la predicción y la observación real donde todas las diferencias individuales tienen el mismo peso.
De acuerdo a wikipedia la ENOJADO (alrededor de un punto central) es algo ligeramente diferente:
m (X) {\ Displaystyle m (X)}
sum (| x_i-m (X) |) / n donde m es una "tendencia central" (por ejemplo, media, mediana).
Pregunta: ¿No existe una definición generalmente aceptada de MAD y MAE, no entiendo algo ... ???