Lugemiskoormus ja pikkus

Insporta küsimuse tüvi on 60–180 tähemärki, iga vastusevariant kuni 80, ühe küsimuse variandid jäävad üksteisest 30 tähemärgi piiresse ning partii ulatuses on õige vastus pikim variant mitte sagedamini kui juhuslikult. Üks küsimus küsib üht asja. Need reeglid on olemas, sest koos vastuse õigsusega salvestatakse vastamisaeg, mistõttu kõik, mis teeb ühe küsimuse lugemise naabritest aeglasemaks või laseb pikkusel õige vastuse reeta, rikub mõõtmist.

Koridorid

Element	Piir	Põhjus
Küsimuse tüvi	60–180 tähemärki	Alla 60 puudub küsimusel tavaliselt vajalik olukord; üle 180 muutub see lugemisülesandeks. Pikem on lubatud ainult siis, kui olukord seda tõesti nõuab.
Vastusevariant	Kuni 80 tähemärki	Variant on vastus, mitte lõik.
Hajuvus küsimuse sees	Ükski variant ei ole teistest pikimast rohkem kui 30 tähemärki pikem	Neli võrreldava pikkusega varianti ei anna visuaalset vihjet.
Partii ulatuses	Õige vastus on pikim variant umbes veerandil küsimustest ja lühim umbes veerandil	Nelja variandi puhul on juhuslik tõenäosus 25 protsenti. Sellest tunduvalt suurema osakaalu korral ennustab pikkus vastust.
Ulatus	Üks küsimus küsib üht asja	Ei mingit „millised kaks järgmistest“.

Kaks esimest piiri seati pärast seda, kui mõõdeti ilma nendeta kirjutatud sisu: ühe taseme küsimuste tüved ulatusid 24 tähemärgist 284-ni, mis on liiga lai vahemik, et testi kümme küsimust oleksid omavahel võrreldavad.

Miks vastamisaeg on oluline

Insporta salvestab, kui kaua iga vastus aega võtab, mitte ainult seda, kas see oli õige. Kiirus üksi on kehv mõõdik ning Heisler ja kolleegid (2023) leidsid, et kiiruse järjestus ilma täpsuseta ütleb vähe; kuid täpsusega kombineeritud kiirus kannab teavet, mida täpsus üksi ei kanna, ja see on osa sellest, kuidas õppija profiil kujuneb, vt Kuidas Insporta uuringuid rakendab.

See toimib ainult siis, kui testi kümne küsimuse lugemine nõuab umbes ühepalju vaeva. Kui üks küsimuse tüvi on järgmisest kolm korda pikem, on nendevaheline ajaerinevus lugemine, mitte mõtlemine, ning profiil võtab selle vastu nagu teadmise. Ühtlane lugemiskoormus teebki vastamisaja tõlgendatavaks.

Pikima variandi reetev vihje

Partii tasandi reeglit oli kõige raskem õppida. Saja jalgpalliküsimuse pilootpartii kirjutati nii, et 93 küsimuses oli õige vastus pikim variant, keskmiselt kaksteist tähemärki pikem kui pikim distraktor. Õppija, kes oleks alati valinud pikima vastuse, oleks saanud juhuslikust tunduvalt parema tulemuse, teadmata jalgpallist midagi. Autor oli iga rea läbi lugenud ega olnud seda märganud, sest tähendust lugedes jääb pikkus nähtamatuks.

Esimene parandus tegi asja uues suunas hullemaks. Iga liiga pika õige vastuse lühendamine andis partii, kus õige vastus oli sajast küsimusest 41-s lühim variant. Küsimusepõhine parandus oli reetva vihje paigast nihutanud, mitte kõrvaldanud, ja seepärast on reegel sõnastatud jaotusena partii ulatuses, mitte piiranguna igale küsimusele.

Toimiv lahendus on pikendada distraktorit, mitte kunagi lühendada õiget vastust. Õige vastus on nii pikk, kui õige vastus olema peab; distraktorile saab lisada kõrvallause, mis muudab selle täpsemaks. Selline pikendus on sisuline muudatus ja see loetakse üle nagu sisuline muudatus: ühe jalgpallitaseme läbitöötamisel pikendati 145 distraktorit ja 29 pikendust olid vigased. Kolm muutsid väära variandi tõeseks (variant, mille järgi taktika „nõuab rohkem töötajaid, kui klubid endale lubada saavad“, muutus kujule „kui enamik klubisid endale lubada saab“, mis lihtsalt vastab tõele), üks kordas õiget vastust ja ülejäänud mõjusid täitesõnadena. Pikendatud distraktor on uus distraktor ja seda kontrollitakse nagu uut, vt Kuidas distraktoreid koostatakse.

Ka kontrolli ennast tuli üks kord parandada. Varajane versioon mõõtis „lühimat“ pikima distraktori, mitte kõigi nelja variandi suhtes, mis on peaaegu „pikima“ vastand ega ole omaette signaal, nii et partii, kus õige vastus oli sajast 56-s pikim, läbis kontrolli. Nüüd loendatakse kogu variantide komplekti suhtes.

Üks küsimus, üks asi

Küsimuse tüvi, mis küsib „millised kaks järgmistest“ või pakub varianti „nii A kui ka B“, on kaks küsimust ühes, ning õppijal, kes teab üht poolt, kuid mitte teist, ei ole õiget vastust anda. Igal küsimusel on üks õige vastus ja kõik kolm distraktorit on igaüks omaette valed, vt Kuidas distraktoreid koostatakse.

Mida see reegel ei tee

Pikkusepiirangud ei tee küsimust tõeseks, uueks ega teemakohaseks. Need kõrvaldavad ühe vihjete klassi, mis laseb õppijal teadmisteta punkte saada, nii et alles jääb teadmine. Teisi klasse käsitlevad artiklid Küsimus peab püsima omaette ja Ükski küsimus kaks korda, ning kontrollid, mis neid kõiki jõustavad, on kirjeldatud artiklis Faktikontroll ja kvaliteediväravad.