Ce qu'une question peut mesurer

Une question Insporta mesure des connaissances spécifiques au sport et rien d’autre : les règles du sport, sa tactique, le savoir-faire qu’il exige, les schémas qu’emploient les adversaires, son histoire et son contexte. Elle ne mesure ni l’intelligence générale, ni les fonctions exécutives, ni la vitesse de réaction, ni quoi que ce soit qui touche au corps de l’athlète. Une question qui porte sur l’un de ces points est un défaut, aussi bien rédigée soit-elle, car elle change ce que signifie le score.

Le construit, en deux volets

La connaissance d’un sport se présente sous deux formes, et Insporta évalue les deux.

Les connaissances déclaratives, c’est savoir quoi : qu’un gardien peut garder le ballon en main huit secondes, que la sixième faute cumulée d’une équipe de futsal est sanctionnée par un coup franc sans mur, que le premier match Test a été disputé en 1877. Ce sont les questions de restitution.

Les connaissances procédurales, c’est savoir comment et quand : dans telle situation, quelle est la bonne action, ou que prévoit la Loi pour la suite. Ce sont les questions d’application. Un défenseur commet un tacle imprudent dans sa propre surface de réparation alors que le ballon est en jeu : quelle est la reprise du jeu ? Un athlète pris de nausées en fin de course longue distance par forte chaleur : que doit-il faire de son bidon ?

La méta-analyse de Kalén et ses collègues (2021) a montré que les mesures spécifiques au domaine comme celles-ci séparent bien mieux les niveaux de jeu que les mesures générales, et que c’est au niveau des connaissances spécifiques au sport que se situent les plus grands écarts entre experts et novices. C’est pour cette raison que le construit est délimité ainsi ; le détail figure dans Trois niveaux de cognition.

Ce qui sort du champ, et pourquoi

Trois catégories de contenu se situent hors du construit, et une question qui s’y rapporte est retirée, quelle que soit sa qualité apparente.

Les aptitudes cognitives générales : mémoire de travail, attention, inhibition, vitesse de traitement, temps de réaction. Insporta ne les évalue pas et ne présente pas son score comme un indicateur de ces aptitudes. Les données selon lesquelles de tels tests prédisent le niveau sportif sont faibles, et un test de connaissances qui prétendrait les mesurer avancerait une affirmation qu’il ne peut pas étayer. L’argument est développé dans Fonctions exécutives : ce qu’un test de connaissances ne mesure pas et Les connaissances spécifiques au sport l’emportent sur l’entraînement cérébral générique.

Les caractéristiques physiques et biomécaniques de l’athlète : charges d’entraînement, protocoles de musculation, charges recommandées, mécanique du corps de l’athlète. Une question sur les charges à la barre se lit à l’identique pour le football et pour le basket-ball ; elle ne dit donc rien de la connaissance du football. Un premier lot de contenus de football, généré à partir d’un document d’entraînement, contenait pour cette raison précise un test entier d’exercices d’entraînement et de préparation physique, et il a été retiré.

La lecture : une question dont la difficulté tient à la longueur ou à la construction de l’énoncé mesure autant la vitesse de lecture que les connaissances. C’est le sujet de Charge de lecture et longueur.

La zone limite

Les sciences du sport, la psychologie et l’économie touchent tous les sports, et elles sont admises à une condition : la réponse doit être un fait relatif au sport, non à la personne. Le niveau 5 du cricket comporte un sous-niveau consacré à l’équipe de sciences du sport qui entoure une formation professionnelle, et le niveau 3 du triathlon un sous-niveau consacré à la physiologie. Tous deux restent dans le champ parce qu’ils demandent ce que fait le sport, à quoi sert un programme de gestion de la charge de travail, pourquoi l’acclimatation à la chaleur compte sur une longue distance, et non ce qu’un athlète donné devrait faire de son propre corps.

Un test utile pour la zone limite : la question et sa réponse seraient-elles les mêmes dans un sport voisin ? Un énoncé dont la réponse serait identique au football à onze n’apprend rien sur le futsal ; un énoncé qui se lirait de la même façon pour n’importe quel sport de batte et de balle n’apprend rien sur le cricket. Chaque question doit reposer sur quelque chose que le sport fait différemment.

Pourquoi la limite est stricte

Un test ne vaut que par l’honnêteté de ce qu’il prétend mesurer. Furley, Schütz et Wood (2023) avertissent que les tests cognitifs dans le sport mesurent couramment plusieurs choses à la fois, et que des tests portant un nom sportif ne contiennent souvent aucun stimulus sportif. La réponse d’Insporta consiste à définir le construit de façon étroite et à y maintenir chaque question, afin qu’un score puisse se lire comme une seule chose : la qualité de la connaissance que cet apprenant a de ce sport. Une prétention plus large serait plus impressionnante et moins vraie.

La place de ce construit parmi les autres principes de la plateforme est décrite dans Comment Insporta applique la recherche. La première des règles, Comment Insporta rédige un test, montre comment les autres règles en découlent.