Psychométrie · Communication

L'observation 360° en psychométrie : le feedback multi-source

12 min de lecture

Définition et fondations historiques du feedback 360° en psychométrie

Schéma · Observation 360° et triangulation
Sujet auto-perception Manager Collègues Collaborateurs Clients internes Mentor / coach Agilis® Com : au moins 2 observateurs invités, synthèse visible par le participant dès 3 réponses.
Croiser plusieurs regards limite le biais d'auto-perception. Dans Agilis® Com, on invite au moins deux observateurs, et le participant ne voit la synthèse qu'à partir de trois réponses, pour qu'on ne devine pas qui a dit quoi. Les catégories du schéma sont celles de la pratique courante du 360 : le questionnaire Agilis® Com ne les distingue pas.

L'observation 360° en psychométrie, souvent désignée sous l'appellation anglophone de « multi-source feedback » (MSF), représente une méthode d'évaluation structurée visant à recueillir des données comportementales et cognitives auprès d'une pluralité d'observateurs. Contrairement aux approches traditionnelles qui reposent exclusivement sur l'introspection du sujet évalué, l'observation 360° confronte la perception interne de l'individu avec les perceptions externes de son entourage professionnel, qu'il s'agisse de ses supérieurs hiérarchiques, de ses collègues ou de ses collaborateurs.

Historiquement, l'idée de croiser plusieurs évaluateurs remonte aux années 1960 : Lawler (1967) propose de noter la performance des managers à travers plusieurs sources à la fois. Le feedback multi-source se diffuse ensuite dans le développement managérial, et Bracken, Timmreck et Church en font la synthèse en 2001 dans The Handbook of Multisource Feedback. L'idée de départ n'a pas changé : une seule source, même sincère, ne voit qu'une partie de la personne.

Faire appel à des observateurs repose sur une idée simple : la personnalité ne se limite pas à ce qu'une personne ressent, elle tient aussi à la trace que ses comportements laissent chez les autres. Croiser les regards permet de voir l'écart entre deux identités professionnelles : celle que la personne perçoit (comment elle se voit) et celle qu'elle projette (comment son entourage reçoit et qualifie ses comportements).

  • Identité professionnelle perçue : Représentation interne, subjective, soumise aux distorsions introspectives et aux idéaux normatifs de l'individu.
  • Identité professionnelle projetée : ce que l'entourage perçoit des comportements de la personne. C'est aussi une perception, avec ses biais, mais elle vient de l'extérieur.

[Lire aussi : Observation 360° : comment obtenir un feedback fiable]

La validité psychométrique du feedback multi-source face à l'auto-évaluation

Les standards rigoureux de l'évaluation psychologique moderne imposent une vigilance accrue quant à l'exactitude des mesures. La seule auto-évaluation (le test passé de manière isolée par un sujet) présente de multiples biais cognitifs et méthodologiques que les statistiques descriptives classiques peinent à neutraliser intégralement. La littérature scientifique regorge de conceptualisations sur ces angles morts.

Le biais de désirabilité sociale en est l'illustration la plus courante. Face à un questionnaire, un individu a naturellement tendance à moduler ses réponses pour s'aligner sur des normes implicites de réussite, projetant ainsi ce qu'il estime être attendu de lui dans son milieu de travail. À ce phénomène vient souvent s'ajouter le biais d'auto-complaisance ou, a contrario, le syndrome de l'imposteur, qui faussent le calibrage introspectif des réelles aptitudes comportementales manifestées. Ces biais ne sont pas l'erreur aléatoire dont parle la théorie classique des tests : ils déplacent les réponses dans un sens. Messick (1995) les range parmi les sources de variance étrangères à ce qu'on veut mesurer.

Voici un récapitulatif comparatif direct entre les deux modalités d'évaluation psychométrique courantes :

Critère Psychométrique Auto-évaluation isolée (Mono-source) Observation 360° (Multi-source)
Fiabilité de la mesure des comportements Exposée aux zones d'ombre de l'individu et à l'effet de halo interne. Renforcée par la pluralité des points de vue (triangulation des données).
Détection de la désirabilité sociale Très faible, masquer un biais est aisé sans variable de contrôle externe. Meilleure : l'écart entre soi et les autres devient visible, mais les observateurs ont leurs propres biais (indulgence, effet de halo).
Traitement de l'écart (Insight) Faible : rien ne vient discuter l'image que la personne a d'elle. Fort potentiel de développement (prise de conscience, conversation sur l'écart).

En croisant les réponses de l'individu avec celles de plusieurs observateurs, on distingue ce que tout le monde voit de ce que chacun voit seul. Un écart entre la personne et son entourage n'est pas une erreur de mesure : c'est une information, que la recherche sur l'accord entre soi et les autres étudie depuis longtemps (Atwater et Yammarino, 1992). Les observateurs ont eux aussi leurs biais, et c'est pourquoi on en invite plusieurs.

[Lire aussi : Les biais de l'auto-évaluation en psychométrie]

Le 360 d'Agilis® Com, tel qu'il est aujourd'hui

Agilis® Com propose un 360 en complément du questionnaire. Des personnes de l'entourage, collègues ou proches, décrivent la personne ; leur regard est ensuite mis en face du sien.

L'observateur remplit 38 écrans, en une dizaine de minutes : 36 affirmations sur la personne, six par Élément, écrites à la troisième personne avec son prénom, puis deux grilles de 24 mots, où il coche de trois à cinq qualités, puis de trois à cinq défauts, qu'il lui trouve le plus souvent. Pour chaque Élément, les affirmations décrivent des comportements naturels, un comportement de premier niveau de pression, un comportement de deuxième niveau et une force.

L'observateur répond sur une échelle de fréquence en 7 crans, de « Jamais » à « Presque toujours », avec une case « Non observé ». Il ne dit pas s'il est d'accord avec une phrase : il dit à quelle fréquence il voit le comportement. Il répond ainsi sur ce qu'il a vu, plutôt que sur une opinion. Le 360 existe dans les six langues du questionnaire.

Le 360 ne classe pas les observateurs par catégorie (supérieur, collègue, collaborateur) : leurs réponses forment une seule synthèse. Quand l'Élément Fondamental vu par l'entourage est le même que celui de la personne, la synthèse l'indique par « Regards concordants » ; sinon, par « Regards divergents ».

La convergence inter-juges : traiter statistiquement les écarts de perception

Au cœur de la psychométrie du feedback multi-source se trouve le concept d'accord auto/hétéro (entre le sujet et les autres) et la notion de fiabilité inter-juges (l'alignement des observateurs entre eux). Sur le plan statistique, l'analyse ne se limite pas à faire la moyenne des notes obtenues. Elle procède par l'évaluation du niveau de consensus. Si trois observateurs voient souvent chez la personne des comportements de l'Élément rouge fonceur alors qu'elle s'en attribue peu, l'écart saute aux yeux.

Lire cet écart avec la personne est le vrai travail du formateur. Lorsqu'une forte divergence émerge entre l'auto-évaluation et l'ensemble des observateurs, cela signale un décalage entre l'image que la personne a d'elle et celle qu'elle donne. Ses intentions, telles que la personne les vit de l'intérieur, ne se traduisent pas fidèlement sous forme de comportements perceptibles par son environnement, ou alors son environnement l'oblige à masquer certaines manifestations naturelles.

Une auto-description seule, quel que soit l'outil, ne donne que l'image que la personne a d'elle à un moment donné. Dans Agilis® Com, le 360 ne remplace pas l'auto-description, il la met en regard : la personne voit sa propre lecture à côté de la synthèse de son entourage.

Combien d'observateurs inviter

Un observateur seul ne suffit pas. Son regard peut être teinté d'indulgence, par amitié, ou de sévérité, après un conflit, et l'on ne peut pas savoir si l'écart vient de la personne ou de lui. Deux observateurs ne règlent pas tout : s'ils se contredisent, la question reste entière. La recherche montre d'ailleurs que deux observateurs placés au même niveau, deux collègues par exemple, s'accordent de façon modeste (Conway et Huffcutt, 1997) ; chaque regard supplémentaire rend la moyenne plus stable.

Agilis® Com fixe deux repères. À l'invitation, il faut au moins deux observateurs, et par défaut au plus neuf. Leurs réponses sont agrégées, et la personne ne voit la synthèse qu'à partir de trois répondants : en dessous, la moyenne laisserait deviner qui a dit quoi. Mieux vaut donc en inviter plus de trois, puisqu'un observateur invité ne répond pas toujours.

Lire l'écart entre soi et les autres

Une fois les scores agrégés, lire les écarts demande à la fois de la méthode et du métier. La recherche distingue classiquement trois cas : les personnes qui se surestiment par rapport à leur entourage, celles qui se sous-estiment, et celles dont la lecture concorde avec celle des autres (Atwater et Yammarino, 1992). La synthèse du 360 d'Agilis® Com dit si les regards concordent ou divergent sur l'Élément Fondamental ; le reste se lit avec la personne.

Les observateurs décrivent aussi la personne sous pression, à deux niveaux : l'état d'inconfort, puis le débordement émotionnel. Ce qu'on voit mal de soi dans ces moments, l'entourage le voit parfois, et c'est souvent là que l'écart est le plus utile à discuter.

Le 360 au service du développement

Le feedback multi-source donne ses meilleurs résultats quand il sert au développement de la personne, plutôt qu'à une décision sur elle : c'est une recommandation fréquente de la littérature (Bracken, Timmreck et Church, 2001). Utilisé ainsi, il aide aussi une équipe à parler de ses façons de faire avec des mots communs.

[Lire aussi : Comprendre la validité de construit et l'alpha de Cronbach]

Ce que le 360 ajoute, et ce qu'il n'ajoute pas

Le 360 n'apporte pas l'objectivité : il ajoute des perceptions à une perception. Sa valeur tient à l'écart qu'il rend visible, et à la conversation qu'il permet. C'est dans cet esprit qu'Agilis® Com propose le sien : des affirmations sur ce que l'entourage voit, une échelle de fréquence, une synthèse qui ne s'affiche qu'à partir de trois répondants, et un entretien proposé à la personne pour en parler.

Références citées dans cet article

Auteurs et travaux explicitement mentionnés ci-dessus. Pour la bibliographie complète, voir le bloc « Références bibliographiques sélectives » plus bas.

  1. Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3), 297-334.
  2. Paulhus, D. L. (1991). Measurement and control of response bias. In J. P. Robinson et al. (Eds.), Measures of Personality and Social Psychological Attitudes (pp. 17-59). Academic Press.

Références bibliographiques sélectives

  1. Galton, F. (1883). Inquiries into Human Faculty and its Development. London: Macmillan.
  2. Spearman, C. (1904). General Intelligence, Objectively Determined and Measured. American Journal of Psychology, 15(2), 201-292.
  3. Cattell, R. B. (1946). Description and Measurement of Personality. Yonkers: World Book Company.
  4. Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3), 297-334.
  5. Cronbach, L. J., & Meehl, P. E. (1955). Construct validity in psychological tests. Psychological Bulletin, 52(4), 281-302.
  6. Costa, P. T., & McCrae, R. R. (1992). Revised NEO Personality Inventory (NEO-PI-R) and NEO Five-Factor Inventory (NEO-FFI) Professional Manual. Odessa: PAR.
  7. Goldberg, L. R. (1990). An alternative description of personality: The Big-Five factor structure. Journal of Personality and Social Psychology, 59(6), 1216-1229.
  8. Paulhus, D. L. (1991). Measurement and control of response bias. In J. P. Robinson et al. (Eds.), Measures of Personality and Social Psychological Attitudes (pp. 17-59). Academic Press.
  9. Nunnally, J. C., & Bernstein, I. H. (1994). Psychometric Theory (3rd ed.). New York: McGraw-Hill.
  10. Anastasi, A., & Urbina, S. (1997). Psychological Testing (7th ed.). Upper Saddle River: Prentice Hall.
  11. Schmidt, F. L., & Hunter, J. E. (1998). The validity and utility of selection methods in personnel psychology. Psychological Bulletin, 124(2), 262-274.
  12. Brown, A., & Maydeu-Olivares, A. (2013). How IRT can solve problems of ipsative data in forced-choice questionnaires. Psychological Methods, 18(1), 36-52.
  13. AERA, APA, & NCME (2014). Standards for Educational and Psychological Testing. Washington: American Educational Research Association.
  14. Lievens, F., & Sackett, P. R. (2017). The effects of predictor method factors on selection outcomes. Journal of Applied Psychology, 102(1), 43-66.
  15. EFPA Board of Assessment (2013). EFPA Review Model for the Description and Evaluation of Psychological and Educational Tests, version 4.2.6.
  16. International Test Commission (2013, 2017). ITC Guidelines on Test Use & Guidelines for Translating and Adapting Tests.

Bibliographie complète, filtrable par thème (validité, fidélité, IRT, Big Five, standards, biais...) : consulter la bibliographie psychométrie.

À propos de cet article. Rédaction : équipe éditoriale Agilis Management. Cet article a une vocation pédagogique. Il s'appuie sur les travaux de référence cités et sur les standards internationaux d'évaluation psychologique (AERA / APA / NCME, BPS, EFPA, ITC). Il ne constitue ni un avis clinique ni une publication scientifique évaluée par les pairs. Une décision à fort enjeu, comme un recrutement, demande un outil conçu et validé pour cet usage, administré par un praticien qualifié. Agilis® Com est un outil de développement : il n'est pas conçu pour le recrutement.

Questions fréquentes

Qu'est-ce que le feedback multi-source (360°) en psychométrie ?

Le feedback multi-source est une méthode d'évaluation qui confronte l'auto-évaluation d'une personne aux observations de son entourage (hiérarchie, collègues, collaborateurs, parfois des proches), pour compléter ce qu'elle dit d'elle par ce que les autres voient.

Combien d'observateurs faut-il pour un 360 Agilis® Com ?

Au moins deux à l'invitation, et par défaut jusqu'à neuf. La personne ne voit la synthèse qu'à partir de trois réponses : en dessous, la moyenne laisserait deviner qui a dit quoi. Mieux vaut donc en inviter plus de trois, et plus il y a d'observateurs, plus la moyenne est stable.

Comment interpréter un grand écart entre l'auto-évaluation et l'observation 360° ?

Il indique souvent une différence entre la façon dont la personne se voit et la façon dont les autres la voient. Ce n'est pas une erreur à corriger, c'est un sujet de conversation : on cherche ensemble les situations concrètes qui expliquent l'écart.

Quelles sont les limites des questionnaires de personnalité n'exploitant que l'auto-évaluation ?

Ils repèrent mal la surconfiance ou le déni, même avec des échelles de contrôle. Ils recueillent la façon dont la personne se voit, ce qui est précieux, mais ne disent rien de la façon dont elle est perçue.

Les six Éléments se voient-ils tous aussi bien de l'extérieur ?

Pas toujours. Certains comportements se remarquent vite dans un échange bref, d'autres demandent de bien connaître la personne : c'est pourquoi l'observateur peut répondre « Non observé ». La synthèse dit ensuite si l'Élément Fondamental vu par l'entourage est le même que celui de la personne.

Pour aller plus loin sur la communication interpersonnelle

Qu'est-ce qu'un profil de communication 6 couleurs ?

Un profil en six couleurs décrit la façon dont une personne perçoit ce qui l'entoure, ce qui la motive et sa manière de communiquer. Dans Agilis® Com, les six couleurs sont six Éléments de personnalité : orange conciliant, violet opiniâtre, rouge fonceur, vert imaginatif, bleu méthodique et jaune espiègle. Chacun de nous dispose des six. Le profil dit dans quel ordre : l'Élément Fondamental, qui se construit dans l'enfance et ne change pas, l'Élément Actuel, qui porte les motivations du moment, puis les quatre autres.

Comment améliorer sa communication interpersonnelle au travail ?

Trois leviers ressortent dans la pratique. D'abord, repérer votre propre façon de communiquer et celle de vos interlocuteurs, par exemple avec un profil Agilis® Com. Ensuite, ajuster vos mots, votre rythme et votre manière de présenter les choses à la personne en face. Enfin, reconnaître les premiers signes de pression, chez vous comme chez les autres, avant qu'ils n'abîment la coopération.

Que se passe-t-il après le questionnaire ?

Un formateur certifié lit vos réponses et valide votre profil. Votre bilan s'ouvre ensuite, avec des recommandations faites pour vous, et un entretien vous est proposé pour en parler. C'est dans cet échange que le profil prend tout son sens : on y relie ce que vous avez répondu à des situations que vous vivez vraiment.

Quels usages en entreprise pour un outil de communication 6 couleurs ?

Formation, coaching individuel, cohésion d'équipe, prévention des tensions, accompagnement des managers, conduite du changement, relation commerciale. Agilis® Com sert à mieux se connaître et à mieux travailler ensemble : il n'est pas conçu pour le recrutement.

Combien coûte le passage d'un questionnaire de communication ?

Le coût dépend du format : un entretien individuel, un atelier d'équipe, un parcours de formation. Chez Agilis Management, on passe le questionnaire par l'intermédiaire d'un formateur certifié, qui valide le profil et propose l'entretien. Le tarif se demande au formateur ou à notre équipe.