¿Como saber si mi modelo de Clasificación es Efectivo?

Para saber si tu modelo de clasificación con machine learning (aka inteligencia artificial), tienes que identificar una variable conocida como Root Mean Squared Error.  En la siguiente imagen:

se aprecia como se calcula el valor en un árbol de decisión J48 (WEKA).

RMSE es la desviación estándar de los errores que ocurren cuando se realiza una predicción en un conjunto de datos. Esto es lo mismo que MSE (Error Cuadrático Medio – Mean Squared Error) pero la raíz del valor se considera al determinar la precisión del modelo.

cuanto más bajo sea el valor, mejor es el rendimiento del modelo.