高得点・低得点学生の各州のNAEPスコア変動を理解するための新しいインタラクティブ表示の導入

COVID-19パンデミ ック以降の学生成績の低下は、社会全体の発展を脅か しています。思慮深いデータビジュアライゼーションは、生徒の状況や高校卒業後の成功に向けて最も追加の支援が必要な生徒を明らかにするのに役立ちます。

2025年4月、国家評価管理委員会(NAGB)は、全国教育進捗評価(NAEP)テストスコアを用いて、国と州が学業回復の道のりでどのように進んでいるかを探るためのNAEPデータツールを発表しました。図1はツールのスナップショットを示しています。このプログラムは、学年(4年生または8年生)および科目(読解または数学)の平均スコアの変化を棒グラフで示しています。このデータツールは主要なデータポイントの要約を提供しますが、最近のETS Researchブログ投稿で示したように、学生のパフォーマンスの変化に関するより詳細なストーリーは、しばしば平均スコアの背後に隠れています。あるいは、よくあるマントラのように「平均は明らかにするよりも隠すこともある!」と言われています。

_{図1。NAGBのパンデミック時代の全国スコア変更バーチャートの4年生読解}の再現。

私たちは、成績の全スペクトラムにわたるスコアの変化を見る インタラクティブディスプレイ を作ることに触発されました。なぜなら、一枚の写真が千の言葉に値するなら、インタラクティブなディスプレイはそれ以上の価値があるからです!このブログ記事では、この新しいツールがパンデミック前後の全米50州における学生のパフォーマンスの変化を示すものを紹介します。NAEPランキングの上位にある州でも、低得点の学生は高得点の同級生よりも多くの差を埋めなければなりません。その後、インタラクティブディスプレイの機能をレビューし、データ内の次のストーリーを見つけられます。

_{図2。 2019年および2024年の全国の4年生NAEP読解スコア分布。}

図2では、2019年と2024年の全国グレード4 NAEP読解スコア分布を用いて、パンデミック前からパンデミック後への読解スコアの変化を示しています。各年ごとに、 学生の学力スペクトラムの低(10パーセンタイルおよび25パーセンタイル)、中間(50パーセンタイル)、高ポイント(75パーセンタイルおよび90パーセンタイル)を示す5パーセンタイルポイントを表示します。

この2つのスコア分布を比較すると、パンデミック以降、低得点の学生の方が高得点の学生よりもスコアの低下が大きくなっていることがわかります。これは、2024年のスコア分布を示す下部バーが2019年よりも広いことからも分かります。低得点の学生は左にシフトしていますが、高得点の学生の2019年のスコア分布とほぼ一致しています。また、以下の点についても述べます。

• 2019年には168点以下だった学生の下位10%が、2024年には158点以下にとどまり、10ポイントの減少となりました。
• 対照的に、2019年には上位10%の生徒が266点以上を獲得したのに対し、2024年はほぼ同じ265点で、わずか1ポイントの減少にとどまりました。
• 平均点だけでなく全得点分布を用いると、低得点の学生の低下は高得点の学生の約10倍の大きさであることがわかります。
• これらの成績変化の違いは、2019年から2024年にかけて低得点と高得点の学生間の学力格差が9ポイント拡大する結果となりました。

_{図3。 2019年から2024年までの全国の4年生NAEP読解スコアの変化。0の水平線は正の変化と負の変化を区別します。}

達成度スペクトラム全体でのスコア変動の変動をより容易に把握するために、 傾向を解釈するためのチャートタイプのバリエーションを導入します。図3に示すように、図2の2つの分布の比較を1本の線にまとめています。

評価結果の典型的な線図が評価年を横軸に示すのに対し、私たちのチャートでは2019年のスコアを横軸の複数のパーセンタイルポイントに、2019年から2024年までのそのポイントの変化を縦軸にプロットしています。また、2019年から2024年にかけて、達成度スペクトルの特定のポイント(ゼロラインより上のポイント)と低下した(ゼロライン以下のポイント)を区別するために、ゼロに横線を設けています。ゼロライン付近のポイントは、2024年のパフォーマンスがパンデミック前の2019年とほぼ同じかほぼ同じであることを示しています。言い換えれば、これらのポイントは2024年の4年生の世代がパンデミック前の水準にあることを示しています。  

図の読みやすくするために、図3の直線の最初の点の位置は以下の通りです。

• 横軸で168、2019年の10パーセンタイルに相当し、
• 縦軸で-10で、2019年から2024年の間に10パーセンタイルで10ポイント下がったことに相当します。

図3の線の他の点も、残りのパーセンタイルポイントそれぞれで同様に決定されます:25位、50位、75位、90位です。それらは一つになって、上向きに傾斜した線を形成し、一目で成果のスペクトラム全体の変化の物語を語ります。上向きの傾斜線は、アメリカ合衆国の4年生が生徒のスコア分布の下端・左端で読解力の損失が上位・右端よりも大きいことを示しています。 したがって、平均スコアの変化を超えて見ると、成績の差は学力スペクトラム全体で異なり、低得点と高得点の学生間の学力格差は拡大していることがわかります。

_{図4。 2019年から2024年にかけての全国、ルイジアナ州、ミシシッピ州、マサチューセッツ州の4年生NAEP読解スコアの変化。0の水平線は正の変化と負の変化を区別します。}

前回 のETSリサーチブログでは、伝統的にNAEPで良好な成績を収めてきたマサチューセッツ州と、学生の読解力向上を目的とした政策を導入していないが実施していない2州、ミシシッピ州とルイジアナ州のNAEP読解スコアを調査しました。図4はこれら3州に対する単一線のアプローチを示し、国全体と対比したものです。

図4には以下の様子が見えます。

• 低得点と高得点の学生間の格差拡大を示す上向きのポイントパターンは、この国に特有のものではありません。また、3州すべてにおいてもある程度は明らかです。
• しかし、ルイジアナ州とミシシッピ州の境界線ははるかに緩やかで急緩であるため、教育の増減は高成績者と低学者の間でより似た傾向がありました。ルイジアナ州の線は0 より大きく 、ほぼフラットです!つまり、ルイジアナ州は学力の幅を問わず、パンデミック前のスコアまで、あるいはそれ以上のスコアを回復させることができたということです。学 業上の必要性やレベルに関わらず、2024年のルイジアナ州では2019年のパンデミック前よりも読解力で成績が良いのです! この結果はルイジアナ州の改革が進んでいることを反映している可能性があります。

ミシシッピ州の改革は、学生のニーズを支援するためにも引き続き機能している可能性があります。

• ミシシッピ州の線は太字の0線に沿っており、2024年のスコアはパンデミック前の2019年と比較的類似しています。

一方で、マサチューセッツ州は2024年に平均的なグレード4読解NAEPスコアが最も高い地域の一つでしたが、以下の点が見られます:

• マサチューセッツ州は最も急峻な線を描き、学力スペクトラム全体で最も顕著な変化を示し、低得点と高得点の生徒間の格差が15ポイント広がっています!

_{図5。 2019年から2024年までの全国、全50州、コロンビア特別区、国防総省教育評価(DoDEA)における4年生NAEP読解結果の変化(インタラクティブディスプレイより)。0の横線は正の変化と負の変化を区別します。}

図5は、4年生の読解用インタラクティブ表示から全ての状態の全体像を示しています。ルイジアナ州が全米やミシシッピ州、マサチューセッツ州だけでなく、すべての州と比べても唯一無二であることを示しています!ほとんどの州はマサチューセッツ州のように上り坂の線を持ち、完全にまたはほぼ完全に0未満に位置しています。言い換えれば、ほとんどの州は特に最低得点の生徒に対して、パンデミック前の4年生の読解スコアレベルに到達するためにまだ挽回が必要です。

これらの結果は8年生の読解力でどのように見えますか?数学ではどうでしょうか?あなたの州はどうでしたか? インタラクティブディスプレイ を使って、あなたの物語を見つけてみてください!自分で評価データを持っていますか?このクロスタイムプロット方法も試してみてください!

ディスプレイの操作方法:

• 左側の「コントロール」パネルを使って、読解や数学とグレード4またはグレード8のスコアを切り替えます。

• 左側の「コントロール」メニューを使って、すべての状態を表示するか、興味のある特定の状態を表示するかを切り替えてください。ドロップダウンメニューから「Control」キーを押し続けると、複数の状態を選択できます。「Shift」キーを長押しすると、連続してリストされている州を選択します。

• 線の一点に一時停止すると、州名、選択したパーセンタイル、パーセンタイルでのスコア変化などの情報が記載されたホバーボックスが表示されます。

• ラインの水平位置に注目して、パンデミック前の2019年の基準的なパフォーマンスを把握しましょう。例えば、バージニアの線とは対照的に、4年生の数学プロットにおけるプエルトリコの線ははるかに左にずれており、2019年の成績が比較的低いことを示しています。

• 2019年の基準年で、低得点と高得点の学生間の学力格差が小さい州や大きい州を特定するために 、線の長さ に注目してください。例えば、DoDEAは4年生の数学の列が比較的短いのに対し、メリーランドはかなり長いです。2019年には、DoDEAの低得点と高得点の学生がメリーランド州よりもスコアが近かったのです。

キャサリン・E・カステラーノ、 マリソル・ケヴェルソン、 エミリー・ケルザビ、 アニタ・サンズ は大規模な評価研究に取り組み、 マイケル・ファウス はETS研究所でテストセキュリティにおけるAI活用の革新に取り組んでいます。マリはアソシエイトリサーチサイエンティストです。キャサリンは主任研究科学者であり、エミリーは研究プロジェクトマネージャーです。マイケルは研究科学者であり、アニタは政策調査のリードアナリストです。著者たちはまた、edtrustのP-12政策担当アシスタントディレクターである ニコラス・ムニャン・ペニー 氏に感謝し、彼の思慮深いコメントとこのブログ記事のレビューに感謝します。