Intervalles et incertitude d'une mesure

Moyenne ± marge

5 folds à [0,81, 0,83, 0,79, 0,84, 0,80] : moyenne 0,814, écart-type ≈ 0,018. Annoncez 0,81 ± 0,02, pas 81,4 %. Deux modèles à 0,81 et 0,82 avec ces marges ne sont pas départagés : il faut plus de données ou un test apparié.

Réflexe ingénieur

Petit jeu = grande incertitude. C'est l'argument contre le test tripoté et pour la validation croisée. Une amélioration inférieure à la marge est un bruit, pas un progrès.