スポーツの知識テストにおける良い誤答選択肢とは何ですか？

テーマを半分ほど知っている人にはもっともらしく、よく知っている人には紛れもなく誤りである選択肢です。理想的には、学習者が実際に信じていそうな、現実の誤解であることが望まれます。

Insportaでは「上記すべて」や「上記のいずれでもない」を使いますか？

いいえ。どの問題にも正答が1つと誤答選択肢が3つあり、誤答選択肢はそれぞれ単独で誤りです。ほかの選択肢を組み合わせた選択肢は使いません。

Insportaでは「常に」や「決して」といった語を探せば誤答を見抜けますか？

いいえ。絶対表現を誤答選択肢に使えるのは、正答も同じ種類の主張をしている場合に限られるため、それによって選択肢が誤りだと分かることはありません。「ほとんどの連盟で認められていない」といった架空の制限も使いません。

誤答で最もよく見つかる欠陥は何ですか？

ひそかに正しくなっている誤答選択肢です。ファクトチェックでは、3つの誤答選択肢がすべて、正答と異なるだけでなく誤りであることを確認します。正しい誤答選択肢があると、その問題に正解が2つ生まれてしまうからです。

誤答選択肢のつくり方

誤答選択肢はどれも、テーマを半分ほど知っている人にはもっともらしく、よく知っている人には明らかに誤りでなければなりません。架空のルールも絶対表現も使いません。

Insportaの問題にはそれぞれ3つの誤答選択肢があり、どれもテーマを半分ほど知っている人にはもっともらしく、よく知っている人には紛れもなく誤りでなければなりません。誤答選択肢は、架空のルールであってはならず、正答にない絶対表現を含んではならず、正答を単に否定したものであってはならず、明らかなナンセンスであってもなりません。3つの誤答は正答と同じだけ測定を担っており、だからこそ同じだけ入念に確認されます。

誤答選択肢は何のためにあるのか

もっともらしい選択肢が1つで、ほかの3つがありえないものなら、それは4択問題とはいえません。ナンセンスを除外できる学習者には候補が1つか2つしか残らず、スコアはもはや答えを知っていたかどうかを反映しなくなります。難しさを担うのは誤答選択肢です。中途半端な知識の学習者が実際に検討するであろう選択肢こそが、誤答選択肢なのです。

そのため、誤答選択肢の基準は2つの要素からなります。中途半端な知識の人にはもっともらしいこと。競技の用語を正しく使い、状況に合っていて、そのテーマについて聞いたことのある学習者が信じかねない内容であることです。そして、よく知っている人には誤りであること。ルールや仕組みを知っている人ならためらわずに退けられ、ファクトチェックでは正答と異なるだけでなく誤りであることが確認されます。ファクトチェックと品質ゲートを参照してください。

ひそかに正しい誤答選択肢

ファクトチェックで最もよく見つかるのは、実は正しい誤答選択肢です。トライアスロンの最初のバッチ100問では、ファクトチェックで11件の問題が見つかり、その大半は実際には正しい誤答選択肢でした。選択肢が禁止されていると述べていることを、ルールは認めていたのです。正しい誤答選択肢があると、その問題には根拠のある答えが2つ生まれ、正答とされていない方を選んだ学習者は、正しいのに不正解と判定されてしまいます。

こうした問題は後になっても害を及ぼします。十分な数の学習者が回答すると、各問題の統計を調べ、その競技を知っている人と知らない人を区別できているかを確かめます。正しい選択肢が2つある問題は、学習者とは無関係の理由でこの検証に落ちます。そのためファクトチェックでは4つの選択肢すべてを確認します。特に注意すべきなのは、同じバッチの別の問題がそれを教えているために正しくなっている誤答選択肢です。作成者自身が、それを正しくする事実を書いたばかりだということです。

架空のルールは使わない

誤答選択肢を誤りにするために、条や審判の振る舞い、運営上の制限をでっち上げることはしません。「各ハーフで1回までしかできない」「ほとんどの連盟で認められていない」「マークしている選手はオフサイドを取られる」「契約上、高い位置からのプレスが義務づけられている」。正答がこのように書かれることはないため、この種の選択肢は競技を知らなくてもまとめて除外でき、何度かテストを受けた学習者はそれを除外することを覚えてしまいます。サッカーの試行バッチ100問では、36問にこの種の架空のルールが含まれていました。

架空の数字についても同じです。ゴールキーパーを何回交代できるか、コーナーキックの際にゴールライン上に何人の守備側競技者が立てるかを制限する条が存在しないなら、制限があるとする誤答選択肢は誤答ではなく、正答の手がかりになってしまいます。

絶対表現は正答に使うか、まったく使わないか

「常に」「決して」「…だけ」「必ず」「いかなる場合も」。誤答選択肢にこうした語が含まれ、正答が含みを持たせた表現になっていれば、絶対表現が誤りの選択肢の目印となり、学習者は含みのある答えを選ぶことを覚えてしまいます。同じ試行バッチでは31問にこのパターンがありました。誤答選択肢に絶対表現を使ってよいのは、正答が同じ強さの主張をしていて、どちらも言い回しからは見分けられない場合です。

正答の否定ではない

「オフサイドである」と「オフサイドではない」は、1つの事実を裏返して問うているにすぎません。正答を否定して誤答選択肢をつくると、2択問題におとりが2つ付いただけのものになります。ただし、その2つの区別こそが問題で問うている内容である場合は別です。ある仕組みを両側から問える場合、新しい問題になるのは片側だけで、もう片側は対抗策、前提条件、またはコストを問う問題に回します。同じ問題は二度出さないを参照してください。

でっち上げのナンセンスより現実の誤解

最良の誤答選択肢は、人々が実際に信じていることです。労作性熱射病では皮膚が熱く乾燥する、というもの。実際には、選手はたいていまだ大量に汗をかいています。トライアスロンのドラフティングは誰かの真後ろを走ることだけだ、というもの。実際には、ドラフトゾーンには幅があるため、横に並んで走ることもドラフティングになります。ゴールキーパーはボールを6秒間保持してよい、というもの。これは2025年までのルールでした。いずれも学習者が選びかねない誤答であり、それを選べば解説から何かを学ぶことになります。でっち上げのナンセンスな選択肢は誰も選ばない誤答なので、それを含む問題は事実上3択になってしまいます。

選択肢を組み合わせない

「上記すべて」「上記のいずれでもない」「AとBの両方」は使いません。誤答選択肢はそれぞれ単独で誤りであり、問題は1つのことだけを問います。誤答選択肢の長さも正答の長さの範囲内に収めます。読解負荷と長さを参照してください。バッチの長さのバランスを調整する必要があるときに延ばすのは誤答選択肢の方で、延ばした誤答選択肢は新しい選択肢として読み直します。

なぜこれが測定のルールなのか

ここで述べた正答の手がかりはどれも、知識なしに得点する方法です。それらを取り除いたあとに残るのが、問題が測ってよいもので説明した構成概念です。競技を知っている学習者は正答を選び、知らない学習者は自分が誤って信じていることに合う選択肢に引き寄せられます。これが、スコアがInsportaの言うとおりの意味を持つための条件であり、またスポーツの知識テストを検証する方法で説明するように、問題を後から較正できるための条件でもあります。