Comment évaluer la validité et la fiabilité de vos modèles mentaux

Les modèles mentaux sont des raccourcis pour le raisonnement. Il s’agit d’un ensemble d’idées et de croyances que nous formons consciemment ou inconsciemment en fonction de nos expériences pour façonner notre représentation du fonctionnement du monde. Si les modèles mentaux sont extrêmement utiles pour prendre des décisions en période d’incertitude, ils restent des raccourcis, ce qui peut être néfaste si nous ne prenons pas de recul pour les évaluer.

Heureusement pour nous, les scientifiques ont déjà conçu un système dont nous pouvons nous inspirer. Évaluer le résultat d’une chaîne d’événements et de décisions est quelque chose qui doit être fait tous les jours dans la recherche scientifique. En particulier, les scientifiques doivent évaluer la validité et la fiabilité de leurs mesures.

Validité : le modèle mental est-il précis ?

Dans la recherche scientifique, la validité est la mesure dans laquelle un concept est mesuré avec précision. Pour le dire simplement : mesurons-nous la bonne chose ? Comme l’ont dit les professionnelles de la santé Roberta Heale et Alison Twycross : « Une enquête conçue pour explorer la dépression mais qui mesure en fait l’anxiété ne serait pas considérée comme valide.

Lorsqu’il s’agit de modèles mentaux, s’interroger sur la validité d’un modèle mental équivaut à se demander : est-ce le bon modèle mental pour la situation ? Il existe de nombreux modèles mentaux, et il se peut que vous appliquiez le modèle mental de la marge de sécurité, alors qu’en réalité vous devriez prêter attention à votre illusion de contrôle.

La validité ne dit rien sur le modèle mental lui-même. Au lieu de cela, cela aide à évaluer à quel point un modèle mental est approprié et précis dans une situation spécifique.

Fiabilité : le modèle mental est-il cohérent ?

La fiabilité est la cohérence d’un modèle mental lorsqu’il est appliqué à plusieurs reprises dans des circonstances similaires. Obtenez-vous le même résultat lorsque vous appliquez ce modèle mental à plusieurs reprises ?

Roberta Heale et Alison Twycross partagent une bonne illustration pour comprendre la relation entre validité et fiabilité : « Un exemple simple de validité et de fiabilité est un réveil qui sonne à 7h00 chaque matin, mais qui est réglé sur 6h30. Il est très fiable (il sonne systématiquement à la même heure chaque jour), mais n’est pas valide (il ne sonne pas à l’heure souhaitée).

Les scientifiques utilisent plusieurs méthodes pour évaluer la fiabilité de leurs mesures, mais deux d’entre elles en particulier sont pertinentes pour évaluer la fiabilité des modèles mentaux.

1. La méthode test-retest. Elle consiste à mesurer la stabilité d’un test dans le temps. Pour les modèles mentaux, vous devez garder une trace du résultat des décisions prises à l’aide d’un modèle mental spécifique. Plus les résultats sont similaires dans le temps, plus le modèle mental est fiable. Ceci est simple à réaliser en ajoutant une section à vos notes quotidiennes ou à votre journal. Roam serait un excellent outil pour ce cas d’utilisation.
2. La méthode inter-observateur. Dans la recherche scientifique, cette méthode examine dans quelle mesure la mesure donne le même résultat lorsqu’elle est administrée par différents observateurs dans les mêmes conditions. C’est évidemment beaucoup plus difficile à réaliser dans la vraie vie, mais c’est intéressant quand il s’agit de modèles mentaux pour discuter de votre expérience avec d’autres personnes. Ont-ils eu les mêmes résultats en utilisant le même modèle mental dans des situations similaires ?

Au-delà de la fiabilité, ils ont peut-être utilisé un modèle mental différent qu’ils considèrent plus valable pour cette situation spécifique – et cela vaut également la peine d’être discuté. Après tout, un modèle mental peut être fiable mais non valide (renvoyant systématiquement un « mauvais » résultat), ou valide mais non fiable (renvoyant systématiquement un « bon » résultat).

Comme vous pouvez le voir, il serait peu logique de considérer la validité et la fiabilité séparément. Pourquoi voudriez-vous continuer à atteindre avec précision la mauvaise cible ?

Comme souvent avec les outils métacognitifs, les méthodes utilisées en science pour évaluer la validité et la fiabilité ne peuvent pas simplement être transposées à la vie réelle et à l’évaluation de modèles mentaux, mais elles offrent un échafaudage – un méta-modèle, si vous le souhaitez – pour guider votre réflexion.