Stimulation cognitive : ce qu'un outil d'entraînement mesure vraiment

La confusion de départ

Score brut contre score étalonné

Un logiciel qui affiche « 72 sur 100 » produit un score brut : le résultat d'une performance à une tâche donnée, un jour donné. Un test étalonné situe ce résultat dans une population de référence appariée en âge et en niveau d'études, et le convertit en une position relative.

La différence est décisive. Sans échantillon de référence, un score ne dit rien de ce que l'on attend d'un test : ni si la performance est ordinaire, ni si elle s'écarte de la norme. Il ne devient interprétable qu'à une condition — comparé à lui-même, chez la même personne, au fil du temps.

Le piège principal

L'effet d'apprentissage

Une personne qui repasse une épreuve progresse, même sans que la fonction sous-jacente ait bougé. Elle reconnaît le format, anticipe la consigne, développe une stratégie propre à la tâche. C'est massif sur les premières répétitions, et cela ne se distingue pas d'un progrès réel si l'outil ne fait rien pour l'en séparer.

Trois garde-fous limitent le phénomène : varier le matériel à chaque passation plutôt que de resservir la même liste, écarter les premières séances de toute lecture de tendance, et afficher un indice de confiance qui croît avec le nombre de séances.

Un outil qui ne dit rien de l'effet d'apprentissage vous demande de croire à une progression qu'il est incapable de distinguer d'une simple familiarisation.

La question de la stabilité

Ce que vaut un écart entre deux séances

Une performance cognitive varie d'un jour à l'autre sous l'effet du sommeil, de la fatigue, de l'heure, de l'anxiété, d'un traitement médicamenteux. Cette variation ordinaire fixe un plancher : en deçà, un écart ne signifie rien.

D'où une règle prudente pour la lecture : un écart isolé entre deux séances ne s'interprète pas. Une tendance sur cinq à six points de mesure espacés, dans le même sens, mérite l'attention. Une rupture franche et durable mérite un examen — par les moyens appropriés, pas par le logiciel.

Ce qui se mesure séparément

Distinguer les composantes plutôt qu'en faire une moyenne

« La mémoire » n'existe pas comme capacité unique. La mémoire de travail, la mémoire verbale à court terme, la mémoire visuo-spatiale et le rappel différé sont dissociables — c'est ce qui permet à une personne d'échouer sur l'une en réussissant les autres.

Un indice global obtenu par moyenne efface exactement l'information la plus utile : un déficit ciblé disparaît sous la performance des autres composantes. Retenir le minimum plutôt que la moyenne conserve le maillon faible visible. C'est moins flatteur pour l'utilisateur, et plus informatif pour vous.

La limite

Ce qu'aucun outil d'entraînement ne fait

• Il ne pose pas de diagnostic, et n'en écarte aucun.
• Il ne remplace pas un bilan mené par un professionnel qualifié.
• Il ne mesure pas la vie quotidienne : les gains observés à une tâche se transfèrent mal aux activités réelles, et la littérature reste prudente sur ce point.
• Il n'établit rien qui puisse fonder une décision concernant une personne — orientation, sélection, maintien dans l'emploi.

Un éditeur qui promet davantage vend une confiance qu'il ne peut pas garantir. Le service honnête est plus modeste : un cadre régulier, un matériel qui ne s'apprend pas par cœur, une trace lisible dans le temps, et l'affirmation claire de ce que la trace ne prouve pas.

Questions fréquentes

En pratique

Un score d'entraînement peut-il figurer dans un compte rendu ?

Oui, à condition d'être présenté comme ce qu'il est : le résultat d'exercices d'entraînement, sans valeur normative, non diagnostique. Le compte rendu doit porter cette mention plutôt que la sous-entendre.

À partir de combien de séances une tendance devient-elle lisible ?

Cinq à six points de mesure espacés donnent une base raisonnable. En deçà, l'effet d'apprentissage et la variabilité ordinaire pèsent trop lourd pour qu'un écart signifie quoi que ce soit.

Comment limiter l'effet d'apprentissage ?

En variant le matériel à chaque passation, en écartant les premières séances de la lecture de tendance, et en espaçant suffisamment les mesures. Aucun de ces moyens ne le supprime ; ils le réduisent.

Pourquoi retenir le minimum des composantes plutôt qu'une moyenne ?

Parce qu'une moyenne masque un déficit ciblé. Si quatre composantes sont bonnes et une faible, la moyenne reste correcte et l'information utile disparaît.

Vocabulaire

Cinq notions à ne pas confondre

Fidélité test-retest

La capacité d'un instrument à donner le même résultat chez une personne stable, à deux passations rapprochées. Un outil dont le score varie fortement sans cause identifiable ne mesure rien d'exploitable.

Sensibilité au changement

Autre chose : la capacité à détecter une évolution réelle. Un instrument très fidèle mais peu sensible affichera une ligne plate même quand la personne progresse.

Effet plancher et effet plafond

Quand la tâche est trop difficile, tout le monde échoue ; trop facile, tout le monde réussit. Dans les deux cas, l'écart entre deux passations devient illisible. Une difficulté qui s'ajuste est ce qui maintient la mesure dans sa zone utile.

Validité écologique

Le lien entre la performance à la tâche et le fonctionnement dans la vie réelle. C'est le point le plus fragile de tout le domaine, et celui sur lequel les promesses commerciales sont les plus fréquentes.

Méthode

Comment lire une courbe de progression

Dans cet ordre, et pas un autre.

La régularité d'abord. Une personne assidue aux résultats stables progresse davantage qu'une personne irrégulière dont la courbe monte : la seconde courbe reflète surtout l'écart entre ses jours.

Le profil ensuite. C'est la dissociation qui informe. Une composante qui décroche pendant que les autres tiennent dit quelque chose qu'un indice global aurait effacé.

La tendance enfin. Sur cinq ou six points espacés, jamais sur deux. Et en écartant les premières séances, dominées par la familiarisation.

Les conditions, toujours. Sommeil, heure, douleur, traitement en cours. Sans elles, un creux inquiète à tort.

Cadre

Ce qui peut figurer dans un compte rendu

Peuvent y figurer : la période couverte, le nombre de séances réellement effectuées, le détail par composante, les délais réels des rappels différés, un indice de confiance lié au nombre de mesures, et la mention explicite du caractère non normatif et non diagnostique.

Ne doivent pas y figurer : un percentile, un âge cognitif, une comparaison à une norme, une conclusion sur une aptitude, ou toute formulation susceptible d'être lue comme un bilan.

Un document qui circule sans mention de ses limites finit par être interprété par des personnes qui n'ont pas la formation pour en juger — un employeur, une famille, une administration. La mention protège d'abord le praticien.

Références

• Ebbinghaus, H. (1885). Über das Gedächtnis — la courbe de l'oubli.
• Baddeley, A. & Hitch, G. (1974). Working Memory — boucle phonologique et calepin visuo-spatial, deux systèmes dissociables.
• Roediger, H. L. & Karpicke, J. D. (2006). Test-Enhanced Learning — se tester consolide plus que relire.

Autres lectures