設計によるテスト妥当性:TOEFL^® エッセンシャル™ズテストのフレームワーク

2021 年6月2日

テストは英語能力の有効かつ信頼できる指標でありながら、受験者に学生に優しく便利な試験体験を提供するにはどうすればよいのでしょうか?設計上です。最近開始されたTOEFL^® Essentials™テストは、質の高い教育機関と受験者が求める手頃なアクセスを提供するために特別に設計されました。有効で信頼できる情報を提供することは新しい概念ではありませんが、最近リリースされたこのテストは、受験者にとって親しみやすく魅力的な形式を用いて、短時間の受験時間で手頃な価格でそれを実現しています。新しい試験の開始とともに、50ページの出版物『 Design Framework for the TOEFL^® Essentials™ Test 2021 』(PDF)が発行され、試験内容と採点手順を示し、スコアの活用を支持する詳細な研究課題が提示されています。

フレームワークがテストスコアの妥当性をどのように支えるか

この試験の設計フレームワークは、TOEFLエッセンシャルズの革新的な設計アプローチにより、機関に対して信頼できることを示すために公開されています。TOEFLエッセンシャルズ試験の設計は、ETSの言語学習研究者、コンテンツ開発者、心理測定士、そしてTOEFL^® プログラム内のビジネス重視リーダーの協力の結果です。また、米国、カナダ、英国の約250人のスコアユーザーや世界中の7,000人以上の受験者を含む広範な市場調査の意見も基づいています。

新しいテストには、世界中の数千人の受験者を対象にパイロットテストされた課題が含まれており、言語能力の基礎的側面と学業および日常生活における課題ベースのコミュニケーション言語能力という2つの重要な側面をカバーしています。これらの重要な側面を組み合わせることで、TOEFLエッセンシャルズのテストは、受験者が英語を使った際に何ができるかを測定しており、単なる英語の知識だけでなく測定されます。自宅で実施される他の言語テストで見られる制限された非本物の課題とは異なり、TOEFLエッセンシャルズの課題は、受験者が現実世界でどれだけ成功するかを直接的に伝えることを目的としています。例えば、受験者は学術的な会話に参加したり、教授や友人に手紙を書いたりする必要があります。

テスト設計のアプローチに加え、TOEFL Essentialsは革新的な多段階適応型試験手法も誇っています。この方法論により、リスニング、リーディング、ライティングのセクションを2段階に分けて実施し、受験者の個々の言語能力により適した言語能力を効率的に測定できます。第1部には平均難易度のテスト課題が含まれ、この部分への回答が第2部の課題の難易度を決定します。在宅試験が「即席で適応」を頼るのとは異なり、TOEFLエッセンシャルズの多段階適応型方法論により、各段階ごとに専門的な評価専門家がまとめ、受験者の習熟度に合わせた強力なコミュニケーション課題を提供できます。

研究の遺産

テストの設計枠組みは、ユーザーがテストを信頼できる理由と妥当性の証拠を数多く示しています。包括的なセキュリティ手順、透明なスコア情報、 そしてパーソナルビデオステートメントの導入により、TOEFLエッセンシャルズの試験は英語力を示す信頼できる受験者に優しい試験となっています。50年以上にわたり、TOEFL評価ファミリーは高品質で厳密な研究に支えられており、TOEFLエッセンシャルズテストも例外ではありません。TOEFL評価ファミリーのすべてのテストと同様に、TOEFLエッセンシャルズの研究プログラムはテスト開発、スコア解釈、スコア利用の全段階を踏み込みます。この研究プログラムは議論ベースの検証アプローチを採用しており、収集すべき実証的証拠を指示する一連の質問で提示されます。この研究プログラムは TOEFL試験委員会(COE)によって監督されており、世界中から集まった11名の専門家からなるパネルで、彼らは英語を第二言語または外国語として教える、学習、試験に関連する学術分野で専門的な評価を得ています。 

TOEFLエッセンシャルズテストについて詳しく知りたい方は、https://www.ets.org/toefl/score-users/essentials/about.html をご覧ください 。 

スピロス・パパジョルギウはETSのマネージングシニアリサーチサイエンティストです。