Comment valider un test de connaissances sportives

Un test de connaissances sportives se valide comme n’importe quel instrument de détection des talents, et la discipline a consigné par écrit ce que cela exige. Bergkamp et al. (2019) ont recensé quatre problèmes méthodologiques qui fragilisent l’essentiel de la recherche sur le talent en football : le critère de réussite est défini de manière lâche, les indicateurs sont étudiés isolément, les échantillons se limitent aux joueurs déjà sélectionnés et la précision est présentée sans le taux de base. Williams, Ford et Drust (2020) ajoutent qu’un travail crédible doit être pluridisciplinaire et longitudinal. Insporta fait de ces deux articles la norme de toute affirmation qu’il avance sur ses propres tests.

Bergkamp et al. 2019 : quatre problèmes à résoudre avant de revendiquer la validité

Un groupe de psychométriciens de l’université de Groningue a passé en revue, dans Sports Medicine, la littérature sur la détection des talents en football et y a retrouvé, de façon récurrente, les quatre mêmes faiblesses.

1. Opérationnalisation du critère

Qu’est-ce qui compte comme une réussite ? Atteindre le niveau professionnel ? Le temps de jeu ? Les buts marqués ? Être conservé par un centre de formation une saison de plus ? Chaque définition donne, avec le même prédicteur, un résultat différent, et les études qui ne fixent pas le critère à l’avance peuvent choisir après coup celui qui les arrange le mieux. C’est la principale raison pour laquelle deux revues peuvent diverger sur la taille d’un effet, comme Murr (2018) et Ivarsson (2020) dans les connaissances sportives prédisent-elles le niveau futur.

Pour un test de connaissances, la discipline consiste à énoncer le critère avant de recueillir les données. Un critère naturel pour Insporta est la progression à travers les niveaux de difficulté d’un sport sur une période fixe, six, douze ou vingt-quatre mois, déclarée à l’avance et inchangée une fois les résultats connus.

2. Accent mis sur des indicateurs de performance isolés

La plupart des études retiennent un indicateur unique. Bergkamp et ses collègues soutiennent qu’une évaluation multidimensionnelle portant sur cinq variables ou plus donne des résultats bien plus stables, et Höner et al. (2021) ont montré, sur 13 869 joueurs, qu’aucun prédicteur isolé ne faisait mieux qu’une combinaison. Insporta enregistre plusieurs dimensions par joueur : la justesse des réponses, le temps de réponse, le profil des thèmes réussis et manqués, et la rétention dans le temps. Toute étude de validation devrait les exploiter ensemble plutôt que d’en présenter une et d’ignorer les autres.

3. Restriction de l’étendue

Si une étude ne mesure que des joueurs de centre de formation, comme Reinhard, Mann et Höner (2025) et la plupart des autres, elle n’observe qu’une tranche étroite de la population. Tous les membres de l’échantillon ont déjà franchi un filtre de sélection : la dispersion des aptitudes est donc comprimée, et les corrélations peuvent diminuer, disparaître, voire s’inverser par rapport à l’éventail complet. Des effets estimés sur des joueurs de centre de formation peuvent ne pas valoir pour les amateurs, et inversement.

Un test public, que tout le monde peut passer, dispose ici d’un avantage structurel : sa population va du simple amateur au professionnel. Ce n’est un atout que si l’éventail complet est conservé dans l’analyse au lieu d’être réduit au haut du panier.

4. Taux de base

Verburgh et al. (2014) ont classé des joueurs talentueux et des joueurs amateurs avec une précision de 89 %. Cela paraît décisif. Mais supposons que le taux réel de réussite dans une population soit de 5 %. Sur 1000 joueurs, 50 réussiront. Un test juste dans 89 % des cas repérera correctement la plupart de ces 50 joueurs, mais signalera aussi à tort environ 11 % des 950 autres, soit quelque 105 joueurs. Les faux positifs sont alors deux fois plus nombreux que les vrais positifs. Höner et al. (2021) ont relevé un taux de réussite de 9 % dans un vivier national de talents : l’hypothèse n’a donc rien de théorique.

Tout chiffre de précision qu’Insporta publiera sera accompagné du calcul du taux de base.

Williams, Ford et Drust 2020 : les principes de conception

Williams, Ford et Drust ont passé en revue, dans le Journal of Sports Sciences, deux décennies de recherche sur le talent à l’aune de quatre principes formulés pour la première fois en 2000, et ont constaté que la discipline ne les avait que partiellement respectés.

Principe	Ce qu’il exige d’un test comme Insporta
Pluridisciplinaire, et non fondé sur une mesure unique	Combiner les connaissances avec le temps, la rétention et le contexte plutôt que de présenter un score unique
Longitudinal, et non transversal	Suivre les mêmes joueurs dans le temps ; un instantané ne peut ni montrer le développement ni le prédire
Étendre la recherche au football féminin	Ne pas supposer que les résultats obtenus chez les hommes se transposent ; Reinhard et al. (2025) citent l’absence de données féminines parmi les limites de leur propre étude
Étudier les critères subjectifs des recruteurs et des entraîneurs	Enregistrer le jugement d’un entraîneur comme une variable à part entière et le comparer aux résultats du test, puisque Höner (2021) a montré qu’il apporte de l’information

Le principe longitudinal est celui que la littérature respecte le moins. Les études prospectives sont coûteuses et lentes, d’où leur rareté, et c’est pourquoi Reinhard et al., avec 110 joueurs, appellent à des échantillons plus larges. Une plateforme qui enregistre chaque test passé par un joueur, au fil des mois et des années, accumule précisément le type de données dont ces auteurs déplorent l’absence. C’est une occasion à saisir, et aussi l’obligation de les analyser correctement.

La norme à laquelle Insporta se tient

Réunis, les deux articles fournissent une liste de contrôle qu’Insporta applique à toute affirmation de validité concernant ses tests, conformément à ses principes de recherche :

1. Le critère est déclaré à l’avance et ne change pas une fois les données recueillies.
2. Plusieurs dimensions sont analysées ensemble, et non un seul score phare.
3. L’éventail complet des joueurs est conservé, du débutant au professionnel, et les résultats sont présentés par tranche lorsqu’ils diffèrent.
4. La précision n’est jamais présentée sans le taux de base.
5. La fidélité est mesurée, et non supposée : une évaluation plus longue exige un contrôle test-retest sur le même groupe avant qu’un chiffre de fidélité soit cité, avec pour référence r = 0,78 selon Höner et al. (2023).
6. L’âge est contrôlé dans toute comparaison entre joueurs, à la suite de Vestberg (2017) et de Heisler (2023).
7. Les données sont segmentées par sexe afin que les résultats concernant le sport féminin puissent être présentés séparément plutôt que supposés.

Rien de tout cela n’a encore été démontré pour Insporta. C’est la norme à l’aune de laquelle les tests seront jugés lorsque les données suffiront pour les juger, et la raison pour laquelle le volet « données probantes » de cette section décrit ce que la littérature étaye plutôt que ce qu’Insporta a prouvé. Ce que les données disent déjà de la conception est exposé dans comment Insporta applique la recherche.