Nessuna domanda due volte

Insporta non chiede due volte lo stesso fatto, e il criterio è che sia nuova la domanda, non l’argomento. Un argomento esplorato in dieci domande lascia spazio a cento domande più approfondite, ma una seconda domanda che insegna lo stesso punto con parole diverse non aggiunge nulla alla misurazione e spreca uno dei dieci posti di un test. La maggior parte delle autoduplicazioni nasce da poche abitudini, e ciascuna ha qui un nome.

Perché i duplicati sono un difetto di misurazione

Un allievo che conosce un fatto e se lo vede chiedere due volte totalizza due su due; un allievo che non lo conosce totalizza zero su due. Il test ha speso un quinto della sua lunghezza per misurare una sola cosa, e il punteggio non riflette più l’ampiezza delle conoscenze. I duplicati tra sottolivelli producono lo stesso effetto sulla scala del livello, e i duplicati in contraddizione tra loro, in cui una domanda indica un’affermazione come chiave e un’altra la propone come risposta errata, lasciano all’allievo che ha studiato la prima argomenti difendibili a favore dell’opzione sbagliata nella seconda.

Man mano che il corpus cresce, questo diventa il difetto dominante. Nel triathlon la verifica dei fatti, a 300 domande, trovava errori fattuali; a 500 non ne trovava quasi più e trovava invece ripetizioni: una dozzina circa di correzioni fattuali contro trenta coppie di duplicati. Più fitta è la copertura, più è difficile per un autore che non vede il lavoro di tutti gli altri evitare di ribadire un punto già trattato.

Le abitudini che producono duplicati

Coppie contronominali. Si enuncia il principio in una domanda e ciò che si perde senza di esso in un’altra, e un solo fatto è stato chiesto due volte. «Fissare il difensore tiene bassa la linea» e «senza un uomo che fissi la linea sale» comparivano come domande separate nello stesso test di calcio, per tre volte.

Uno stesso fatto in più test. Un fatto che si adatta a più argomenti di test viene chiesto una volta in ciascuno. «Qualcuno deve attaccare la profondità oltre l’attaccante» compariva in quattro dei dieci test di un sottolivello, e il corpus lo insegnava già tre volte.

Test costruiti su una prospettiva anziché su un argomento. «Modi in cui fallisce», «come diagnosticarlo», «come viene valutato» e «contro schieramenti diversi» sono punti di vista sugli altri test, non argomenti, e un test costruito su uno di essi si riempie dei fatti dello stesso sottolivello riformulati come sintomi. Un test di diagnosi in un sottolivello di calcio riproponeva otto delle sue dieci domande con l’enunciato capovolto in «quale verifica viene per prima»; un test sui modi di fallire in un altro aveva tre domande proprie su dieci. A un test si assegna un argomento, non una prospettiva. Le domande di diagnosi sono legittime solo per un errore la cui causa non sia già la risposta a un’altra domanda dello stesso sottolivello.

Lo stesso meccanismo da entrambi i lati. La marcatura a uomo neutralizzata dalle rotazioni e le rotazioni neutralizzate dalla marcatura a uomo sono una sola domanda. Quando un meccanismo si può chiedere dal lato di chi attacca e da quello di chi difende, solo un lato è nuovo; l’altro deve spostarsi sulla contromossa, sul presupposto o sul costo.

Il lotto deve essere coerente con sé stesso

Due domande dello stesso lotto non possono contraddirsi. In un pilota, «mantieni la tua zona» era la chiave in un test e un’opzione errata in un altro. La coerenza si verifica sull’intero lotto prima della consegna, e un fatto che è chiave in un sottolivello non viene proposto come distrattore in un sottolivello vicino, a meno che l’enunciato non renda esplicita la distinzione.

Come si trova un duplicato

Tre strumenti li individuano, e nessuno basta da solo. Ogni domanda porta un’etichetta tematica che deve essere unica in tutto lo sport; due domande che reclamano la stessa etichetta sono una sola domanda. Un confronto della sovrapposizione lessicale intercetta le riformulazioni rispetto a tutto ciò che è già pubblicato. E un lettore con i livelli vicini sotto gli occhi coglie la coppia che dice la stessa cosa con parole diverse, che il controllo lessicale non può vedere: una coppia sulla frequenza di bracciata in acqua mossa condivideva il 40% delle parole contro una soglia del 65%, e abbassare la soglia porta solo a segnalare domande legittimamente distinte.

Spesso i metadati rivelano un duplicato prima del testo. In un lotto di cento domande, otto coppie insegnavano lo stesso punto, e in tre di esse la citazione della fonte era identica nei due record.

Che fine fa un duplicato

Non lo si può semplicemente eliminare, perché ogni test contiene esattamente dieci domande. Lo si sostituisce, e le sostituzioni sono messe in conto in ogni lotto. Quale metà della coppia tenere si decide leggendo entrambe a confronto con la fonte: due domande sulla reidratazione sembravano intercambiabili finché una si è rivelata correttamente condizionata a un’altra seduta entro poche ore, e l’altra no.

Un’eccezione è voluta: i fatti di sicurezza possono ripetersi in ogni sottolivello che porta verso il pericolo, vedi Evidenze, affermazioni e sicurezza. I controlli che garantiscono l’unicità, e i loro limiti noti, sono descritti in Verifica dei fatti e controlli di qualità; come si pianificano i livelli perché ciascuno vada più a fondo di quello sottostante è spiegato in Livelli e sottolivelli.