Les quatre colonnes hachurées « Direction » sont peu fiables, et c'est mesuré. Le modèle V9 obtient une AUC de 0,5056 hors échantillon, là où le pile ou face vaut 0,50 — et deux plis de validation sur quatre tombent même en dessous. Son taux de bonnes réponses est inférieur au taux de base : répondre « hausse » à chaque fois ferait mieux que lui. La probabilité brute ne dit donc rien par elle-même ; seul l'écart au taux de base de 53,05 % en porte un peu, et sous 1,5 point il n'en porte plus du tout. Le rang est la forme la moins trompeuse : la valeur absolue se déplace à chaque ré-entraînement, l'ordre non. Toutes les autres colonnes du tableau, elles, sont mesurées et exploitables.