Comment se construit une norme locale, et ce qu'on affiche tant qu'elle n'existe pas

Nous avons expliqué ailleurs pourquoi un bon test américain peut être un mauvais test à Abidjan : la norme importée compare vos candidats à une population qui n'est pas la leur. Reste la question que personne ne pose au fournisseur qui promet des « normes locales » : elles se fabriquent comment, exactement ?

Une norme n'est pas un barème

On confond souvent les deux. Un barème dit « à partir de 60 %, c'est bon » : c'est une décision, prise par quelqu'un, pour un poste donné. Une norme ne décide rien. Elle répond à une seule question : parmi les gens comparables à ce candidat, combien font moins bien que lui ?

Construire une norme, c'est donc faire passer le test à un grand nombre de personnes représentatives, observer comment leurs scores bruts se répartissent, et transformer cette répartition en table de correspondance. C'est cette table qui permet de dire « 75^e percentile » plutôt que « 32 bonnes réponses sur 50 » : un chiffre qui, seul, ne veut rien dire.

La conséquence est directe : tant que la table n'existe pas, aucun percentile n'est calculable. Ni aucun niveau. On peut afficher un score brut ; on ne peut pas le situer.

Le chiffre : combien de passations faut-il ?

Il n'existe pas de nombre magique, mais il existe un raisonnement. Un percentile estimé sur trente personnes bouge énormément d'un échantillon à l'autre : refaites la collecte avec trente autres candidats, et le même score brut se retrouve dix ou quinze rangs plus haut. Un chiffre qui change autant selon qui a passé le test avant vous ne peut pas fonder une décision de recrutement.

Plus l'échantillon grandit, plus cette instabilité se réduit, et elle se réduit vite au début, puis de moins en moins. C'est ce qui permet de fixer un seuil de travail plutôt qu'un idéal inatteignable.

Le nôtre est de 200 passations. En dessous, nos instruments cognitifs ne produisent aucun niveau : le rapport affiche la mention « Norme en cours de constitution — score non normé, à interpréter avec prudence », et recommande explicitement de confirmer l'interprétation par un entretien structuré. Ce n'est pas un message d'attente poli, c'est un comportement du logiciel : le niveau reste vide tant que le compte n'y est pas.

Deux cents personnes, oui, mais lesquelles ?

Le nombre ne suffit pas. Un échantillon de deux cents étudiants ne norme pas une population de cadres, et deux cents cadres d'Abidjan ne norment pas des agents de terrain. La composition compte autant que la taille, sur quatre dimensions au moins :

Le secteur d'activité, parce que les exigences cognitives d'un poste bancaire et d'un poste logistique ne sélectionnent pas les mêmes profils en amont. Le niveau d'études, qui pèse fortement sur les tests verbaux et numériques. L'âge et l'ancienneté, qui déplacent les scores de vitesse et de mémoire de travail. Et les conditions de passation : un échantillon constitué au bureau, sur grand écran et fibre, produit une norme trop haute pour juger un candidat qui répond sur smartphone en 3G instable.

C'est la raison d'être de notre panel pilote : recruter des volontaires par secteur et par niveau, plutôt que d'accepter qui se présente. Un échantillon de commodité produit une norme de commodité.

Ce qui se passe entre-temps

Un fournisseur a deux options pendant la phase d'étalonnage. La première est de servir quand même un niveau, calculé sur une norme importée ou sur un échantillon trop mince, en espérant que personne ne demande sur quoi il repose. La seconde est de le dire.

Nous avons choisi la seconde, et elle est visible à deux endroits : sur chaque fiche de notre catalogue, qui annonce la phase d'étalonnage en cours ; et sur le rapport lui-même, qui refuse d'afficher un niveau qu'il ne peut pas justifier. Un score sans niveau est moins confortable qu'un niveau sans fondement : il est surtout beaucoup moins coûteux pour le candidat écarté à tort.

Concrètement, cela signifie qu'un score brut se lit dans un entretien structuré, pas dans un tableau de classement. C'est l'usage recommandé de nos instruments cognitifs (raisonnement logique, raisonnement numérique, raisonnement verbal) tant que leur norme se constitue.

Une norme vieillit

Le travail ne s'arrête pas au deux centième questionnaire. Une population candidate change : les parcours scolaires évoluent, l'accès au numérique progresse, les métiers se déplacent. Une norme figée en 2026 décrira de moins en moins bien les candidats de 2031, et l'erreur sera invisible, puisque le rapport continuera d'afficher des percentiles d'apparence normale.

D'où le recalibrage continu : les passations réelles alimentent la distribution, et la table de correspondance se recalcule à mesure. C'est aussi ce qu'attend la norme ISO 10667-2, qui encadre les services d'évaluation : documenter la population de référence, et la tenir à jour.

Ce que nous ne savons pas encore

Nos instruments ne sont pas tous au même stade, et aucun ne le sera au même moment. Certains approchent du seuil, d'autres viennent d'ouvrir leur collecte. Nous ne publierons pas de norme unique « Afrique de l'Ouest » : la Côte d'Ivoire, le Sénégal et le Cameroun n'ont ni les mêmes systèmes scolaires ni les mêmes marchés de l'emploi, et les fondre en une seule population reproduirait, à l'échelle du continent, l'erreur que nous reprochons aux normes importées.

Ce que nous pouvons dire aujourd'hui, c'est où en est chaque instrument, et ce que le rapport affiche en conséquence. C'est peu spectaculaire. C'est vérifiable.