14. Les bases de la psychométrie

Psychométrie

• Branche de la psychologie qui se consacre à la théorie et à la technique de mesure des processus psychologiques

• Vise à quantifier et d’analyser les aspects psychologiques pour mieux comprendre et traiter les individus

• Développe et valide des outils de mesure pour évaluer des caractéristiques mentales et émotionnelles

  • intelligence

  • personnalité

  • attitudes

  • aptitudes

La standardisation

• Processus visant à uniformiser des procédures, des mesures ou des outils pour assurer leur cohérence et comparabilité

• Implique de structurer l’administration d’un test, les conditions de passation, et l’interprétation des résultats de manière identique pour tous les participants

• Permet aux résultats d’être comparables entre individus et garantit que les différences observées sont liées aux caractéristiques mesurées plutôt qu’à des influences contextuelles ou méthodologiques

Éléments standardisés

• Environnement

  → l’est moins avec Internet

  → plusieurs supports de réponses ⇒ temps et lieu de réponse varié

• Instructions

• Items : reformulation + nombre

  → les mots utilisés ont une importance

• Réponse : type et format ( + nombre)

• Éventuelles contraintes temporelles

• Codage

  → comment on score

• Seuils

Standardisation d’un test

Items

• Un item (ou élément) d’un questionnaire sous forme de questionnaire, d’énoncé ou une invite unique conçu pour mesurer un aspect spécifique d’un concept psychologique

• Chaque élément fournit des donnés qui, combinées à d’autres éléments, permettent aux chercheurs de déduire des informations sur le concept plus large étudié

Items inversés (reversed items)

• Question ou une affirmation dans un questionnaire formulée de manière à évaluer le même concept, mais dans le sens opposé des autres items

• Les items inversés servent à éviter les réponses automatiques ou biaisées et à encourager une réponse plus réfléchie de la part des participants

• Dans le traitement des données, les réponses aux items inversés sont ensuite “recalculées” ou “décodées” pour être alignées avec l’échelle globale

• Les participants qui donnent des réponses cohérentes et réfléchies auront des scores complémentaires entre les items normaux et les items inversls, renforçant la fiabilité de la mesure

Les caractéristiques des items

• Non-redondants

  • Les items doivent apporter des informations uniques sans répétitions inutiles

  • Les items d’une même sous-échelle sont bien sûr similaire mais chacun doit avoir son unicité

• Discriminants

  • Les items doivent permettre de distinguer clairement entre les réponses des participants

  • Un item qui engendrera toujours la même réponse n’est pas un bon item

• Peuvent permettre le contrôle de l’attention

  • Les items peuvent être conçus pour vérifier si l’attention des répondants est focalisée sur certains aspects spécifiques

  • Ils n’appartiennent dans ce cas pas au concept d’origine et ne doivent pas être pris dans le total

Scoring des échelles

Inverser les items inversés

1. Qu’est-ce qu’on mesure ?

   • Identifier la direction de l’échelle

2. Quelle est l’échelle ?

   → tableau

Identifier les items des sous-échelles

• Beaucoup d’échelles (questionnaires) possèdent une structure sous-jacente composée de plusieurs sous-dimension

  → structure multidimensionnelle

• Ces sous-dimensions représentent des aspects spécifiques du concept global mesuré par l’échelle et sont évaluées à travers un ensemble de questions spécifiques (items) qui reflètent cet aspect particulier

Calcul des scores

• Soit addition des items des sous-échelles, soit la moyenne des items des sous-échelles

  → se référer à l’étude de validation

• Score total : soit l’addition / la moyenne des scores des items de l’échelle soit l’addition / la moyenne des scores des sous-échelles (pondérés ou non)

  → se référer à l’étude de validation

→ Les moyennes ou pondérations permettent de prendre en compte des hétérogénéités dans le nombre d’items

→ Les moyennes permettent (au contraire des additions) de comparer des scores à des sous-échelles non homogènes

Présence d’un score total

Certains questionnaires combinent les scores pour obtenir un score global, qui reflète une mesure générale du concept évalué

→ se référer à l’étude de validation

Absence de score total

Certains questionnaires n’ont pas de score global, les sous-dimensions sont analysées séparément apportant chacune une information spécifique

→ se référer à l’étude de validation

Validité

Une mesure valide est une mesure qui évalue ce qu'elle est sensée mesurer

Vérifier la validité convergente et divergente

• La mesure converge avec la notion qu’elle est sensée mesurer

  → la mesure est liée à d’autres mesures du même construit

  → Y a-t’il d’autres questionnaires du même style dans l’étude ? Si oui, y a-t’il convergence (= corrélation) ?

• La mesure diverge de celle mesurant les autres notions de la psychologie → les concepts indépendants de celui auquel on s’intéresse

  → Plus difficile à tester : il ne doit pas y avoir trop forte association avec des mesures d’autres concepts

  → Vérifier ces validités avec les recherches antérieures

Validité convergente

La mesure converge avec la notion qu'elle est sensée mesurer, liée à d'autres mesures du même construit.

Validité divergente

La mesure diverge de celles mesurant les autres notions de la psychologie (concepts indépendants).

Vérifier la validité de contenu, de critère, concurrente et de façade

• Contenu :

  • La mesure contient toutes les facettes du construit visé (sans en omettre aucune)

• Une mesure avec une bonne validité de critère est une mesure qui est associée (corrélée) avec un critère externe (concurrente) ou un résultat auquel elle devrait théoriquement être liée dans le futur (prédictive)

• Concurrente : Association de la mesure avec une autre mesure, mesurée simultanément, qui servirait de critère

→ Vérifier ces validités avec les recherches antérieures

Validité de contenu

La mesure contient TOUTES les facettes du construit visé (sans en omettre aucune).

Validité de critère

Mesures qui est associée (corrélée) avec un critère externe (concurrente) ou un résultat auquel elle devrait théoriquement être liée dans le futur (prédictive).

Validité concurrente

Association de la mesure avec une autre mesure, mesurée simultanément, qui servirait de critère.

Fiabilité / Fidélité (Reliability)

Mesure la stabilité d'une mesure

Vérifier la fiabilité dans le temps

• Test-retest

  → Mesure de la stabilité d'une mesure à travers le temps (pour un construit qui n'est pas sensé bouger).

• Vérifier cette fiabilité avec les recherches antérieures

Vérifier la fiabilité dans l’espace

• Formes parallèles / bissection

  → Mesure de la stabilité d'une mesure pour un concept qui varie dans le temps et dont la fidélité doit être mesuré au même moment (test-retest n'est pas possible)

• Il y a très peu de questionnaire avec des formes parallèles donc difficile à tester, la fiabilité de bissection est très facile et intéressante à faire à chaque étude → corrélation entre moitiés

Consistance interne (Corrélation inter-item) : Alpha de Cronbach

• Évalue la cohérence d'une mesure en calculant les corrélations entre toutes les pairs d'item

  → moyenne (pondéré) des corrélations

→ à tester dans toute étude pour avoir une idée de la fiabilité de la mesure dans l’échantillon testé

• Alpha quand un item est enlevé → si alpha augmente ⇒ cet item n’est pas bon

Les aspects langagiers et culturels

• Les traductions des questionnaires

  • Beaucoup de questionnaires sont créés en français, mais beaucoup plus sont traduits depuis une version non-francophone (souvent anglophone)

  • À la traduction, il se peut que des erreurs langagières et des inadéquations culturelles apparaissent

  • Inadéquats culturellement

  • Inadéquats linguistiquement

  • Linguistiquement difficiles

Analyse factorielle et dimensionnalité - Structure des instruments

• La plupart des échelles de questionnaires possèdent une structure définie

• Cette structure peut être composée de facteurs ou dimensions qui regroupent des ensembles d’items

• Pour la confirmation de la validité de notre mesure, il s’agit pour chaque étude de tester si nous retrouvons la structure d’origine de l’échelle avec les données récoltées

Analyse factorielle confirmatoire (AFC)

• Vérifier si la structure théorique de l’échelle est confirmée par les données

• Permet de tester si les items s'organisent en facteurs comme prévu théoriquement.

• Aide à s’assurer que chaque facteur mesure bien une dimension spécifique et que les items sont regroupés de manière cohérente

→ Vérifier pour l’échantillon considéré

Théorie de la réponse à l'item (TRI)

• Alternative à la considération dimensionnelle des échelles

  • Analyse la qualité des items des échelles de mesure

  • Permet de comprendre comment chaque item fonctionne individuellement dans une échelle, en prenant en compte les capacités ou niveaux des participants

    → permet la pondération

  • Approche plus fine et personnalisée de l’évaluation psychologique, permettant d’identifier les items qui mesurent bien les différences entre individus