英国の学生の成績をアルゴリズムが決定。混乱が発生

結果発表の日は、毎年恒例の決まり文句でいっぱいの、古びたリズムがある。封筒を掴んで三々五々飛び跳ねる少女たちの地元紙の写真、試験が簡単すぎると不満を漏らすコラムニスト、そして、自分たちはすべてうまくいったので試験の結果は重要ではないと、いつもの5、6人の有名人が価値あるツイッタースレッドを投稿する。

しかし今年は状況が全く異なります。新型コロナウイルス感染症のパンデミックにより、試験は中止となり、教師による評価とアルゴリズムに置き換えられました。混乱が生じています。

スコットランドでは、学校の過去の成績やその他の要素に基づいて成績を変動させるアルゴリズムによって数万人もの生徒の成績が下方修正された後、政府は方針を根本的に転換せざるを得ませんでした。イングランド政府は、今日のAレベル試験の結果にも同様の事態が予想されるため、「トリプルロック」と呼ばれる制度を導入しました。これは、段階的な異議申し立てを通じて、生徒が事実上、教師の評価、模擬試験の結果、あるいは秋に再受験する試験のいずれかから成績を選択できるようにするものです。

結果発表当日の混乱は、ある程度の不公平さを軽減するのに役立つはずですが、恵まれない環境の学生に不均衡な影響を与え、大学出願やキャリアに波及する可能性があります。この混乱は、特定のグループの生徒に体系的に不利益をもたらす、評価、試験、そして大学入学制度における重大かつ長期的な欠陥を浮き彫りにしています。

トリプルロックはさておき、貧困層出身の少数民族の生徒はトリプルパンチに見舞われる可能性がある。まず、無意識の偏見のために、教師による評価が白人生徒よりも低くなってしまう可能性があると、元副校長でDecolonise the Curriculumの公平性活動家であるプラン・パテル氏は主張する。彼は、例えば2009年に行われたキーステージ2の英語の予測と結果に関する研究を例に挙げ、パキスタンの生徒は白人生徒よりも実際の成績よりも低い点数を予測される可能性が62.9%高いことを明らかにした。また、黒人やカリブ海諸国出身の男子生徒の成績は16歳で急上昇しており、パテル氏によると、これは彼らが学校生活で初めて匿名で評価される時期に相当するという。

この点については、誰もが同意するわけではない。キングス・カレッジ・ロンドンのカイリ・リムフェルド氏が主導し、1万人以上の生徒のデータに基づいた研究では、教師による評価は一般的に将来の試験成績の良い予測因子となるものの、試験での成功を最もよく予測できるのは過去の試験での成功であることが明らかになった。

しかし、教師が自分の生徒を評価することで成績が水増しされるのではないかという懸念から、これらの評価は単独では使用されていません。今年は新型コロナウイルスの影響で、偏りの可能性がある教師の評価は修正され、学校の過去の成績や、個々の生徒とはほとんど関係のない可能性のある他の要因も考慮されました。実際、TESによると、今年のAレベルの成績の60%は、教師による評価ではなく、統計モデルによって決定されています。

これは、成績の悪い学校に通う優秀な生徒の成績が、前年度の生徒の成績が振るわなかったために下がった可能性があることを意味します。「特定の環境の子どもたちは、評価が下がってしまうことがあります」と、教師であり教育専門家でもあるスティーブン・カラン氏は述べています。スコットランドでは実際にこのようなことが起きており、貧しい家庭の子どもたちは、裕福な地域の子どもたちに比べて、成績が下がってしまう可能性が2倍も高いことが分かりました。

不服申し立ての手続きにも不公平さが見られます。特にイギリスでは、不服申し立てをするか否かの決定権は生徒ではなく学校にあります。「生徒が自分で不服申し立てできないというのは、本当にひどいと思います」と、自分の子供が結果を不安そうに待っていたリムフェルドさんは言います。「私たちが引き起こした混乱にはただただ驚き、見ていて本当に悲しいです。」

どの学校が不服申し立てをするか、あるいは不服申し立てができるかについては、学校によって大きな違いがあるだろう。必然的に、資金力のある私立学校は、貧困地域の資金不足の公立学校よりも不服申し立てをしやすいだろう。「親は学校にプレッシャーをかけ、子供が期待通りの成績を残せなければ激怒するでしょう」とカラン氏は言う。一方、公立学校では「生徒のために戦う学校もあれば、そうでない学校もある」し、いずれにせよ教師たちは新学期が始まるまで休暇を取っている。

8月11日、ギャビン・ウィリアムソン氏はトリプルロックを発表した。これは、生徒が教師の評価による成績、模擬試験の結果、あるいは当初の成績に納得できない場合は秋に再試験を受けるという選択肢を持つというものだ。しかし、ここにも大きな問題がある。「誰もこのことについて相談していません」とリムフェルド氏は言う。「模擬試験を全く実施していない学校もあれば、複数回実施している学校もあります。平均点はどうなっているのでしょうか？どのように機能するのでしょうか？」

政府は模擬試験の結果をどのように活用するかをまだ具体的に検討中ですが、受験状況には大きなばらつきがあり、模擬試験結果の記録は一元化されていません。中には、生徒のデータを一元的に収集していない学校もあります。パテル氏によると、教師が特定の生徒を脅して学年の残りの期間、より一生懸命勉強させるため、模擬試験の結果を低く評価することもあるとのことです。彼は、模擬試験を成績に含めることで偏見を是正できるとは考えていません。「全く効果はありません」と彼は言います。「成績を評価する教師は、模擬試験の採点をした教師と同じだからです。」

つまり、パテル氏が強調するように、試験問題の採点経験があまりない教師にとって、目の前のページに書かれた言葉から意識的あるいは無意識的な認識を解きほぐすのは困難だ。「教師たちは今、資格も訓練も受けていない任務を遂行することで、人生を変える可能性のある決断を迫られているのです」と彼は言う。

このプロセスを経て、たとえ二人の子どもの最終成績が同じになったとしても、遅延や不正確な評価は致命的となる可能性があります。特に今はそうですが、例年通りであればなおさらです。Aが3つ取れると予測されれば、名門大学に出願して合​​格する可能性が高くなり、関連教材を指導される可能性も高くなり、実際に合格する可能性も高くなります。

3 つの C が予測され、3 つの A を取得した場合、結果が出る頃には、1 年間休学せずに最高の大学に出願するのはすでに遅すぎる可能性があります。運命は、あなたの成績ではなく、教師の評価によって決まっているのです。

教師たちは、放置されてきた混乱に愕然としている。カラン氏は、試験は単に年度の後半に、ソーシャルディスタンスを確保した上で実施すべきだったと主張する。そして今、成績が政治問題化している状況にあると指摘する。そして、今日のGCSEとAレベルの生徒たちは、明日の有権者なのだ。

大学側もこの状況を神経質に注視している。私たちが話を聞いた関係者はスコットランドの状況を観察しており、多くの生徒――少なくとも不服申し立て費用を負担できる学校の生徒――は、結局は希望通りの成績を得られるのではないかと懸念している。「結局、『数字を選ぶ』しかできない状況に陥ってしまうのです。なぜなら、信頼できる情報源が全くないからです」とカラン氏は言う。

これは、目標に達しなかった学生を補うために過剰に配分されることが多い大学の配置にも影響を与えるでしょう。一部の大学では、目標の成績を達成した学生が多すぎる一方で、ランキング下位の大学では学生獲得に苦戦することになるかもしれません。

パテル氏は、データのより賢明な活用がこの問題の解決に役立つ可能性があると主張する。資格・試験規制局（OCER）は、成績の水増しを防ぐために学校の成績に関するデータを利用してきたが、本来は社会的な不公正に対抗するために、隠れた偏見に関するデータを活用すべきである。

突然、入学希望者数が急増した大学は、ブラックボックスの中身を調べて、どの学生がなぜ評価を下げられたのかを把握し、その情報を用いて、誰に入学を許可するかを判断することができる。そもそも、大学はもっと頻繁にこうした措置を取り、特定の社会的・経済的背景を持つ学生にとって良い成績を取るのがどれだけ容易かを考慮した、状況に応じた入学条件を提示すべきだと言えるだろう。

「教師による評価は偏りがちですが、生徒を評価する方法は他にもたくさんあります。様々な手法を活用すれば、その影響を軽減することができます」とパテル氏は言います。「理想的な状況というものはありませんが、そもそも試験は学習や成功を測る優れた指標ではなかったという点が問題なのです。」

この記事はもともと WIRED UKに掲載されたものです。

WIREDのその他の素晴らしい記事

• TikTokとデジタルブラックフェイスの進化
• ナチスの無人機からロンドンを救ったアメリカの科学者たち
• ロックダウン中に家族の食事を計画し調理するためのヒント
• シークレットモードは思った通りに動作しない可能性があります
• このアルゴリズムは医師に代わるものではなく、医師をより良くするものである
• 🎙️ 未来がどのように実現されるかをテーマにした新しいポッドキャスト「Get WIRED」をお聴きください。最新エピソードを視聴し、📩ニュースレターに登録してすべての番組をチェックしましょう。
• 🏃🏽‍♀️ 健康になるための最高のツールをお探しですか？ギアチームが選んだ最高のフィットネストラッカー、ランニングギア（シューズとソックスを含む）、最高のヘッドフォンをご覧ください