skip to main content skip to footer

 

ETSニュース&インサイト

 

TOEFL® エッセンシャル™評価:新しいテストの設計と開発

 

2021年6月16日

ETSの新しいテストはすべて、慎重な設計と開発プロセスを通じて作成されます。TOEFL®評価ファミリーの 最新メンバーである TOEFL® エッセンシャル™ズテストも例外ではありません。TOEFL® Essentials™ Test 2021のデザインフレームワークに 詳述されているように、 TOEFL Essentials テストは、受験者の英語でのコミュニケーション能力を重視しつつ効率を最大化するデジタルで実施される英語能力評価です。多段階適応試験設計を活用し、欧州共通枠組みの全能力範囲の測定も可能にしています。ここでは、厳密なタスク設計と専門的なテスト開発の実践が新しいテストを作成する上で果たす重要な役割を強調します。

ETSの評価タスク設計へのアプローチ

新しいTOEFL Essentialsの課題は、単なる言語知識ではなく、受験者が英語で何 ができる かを引き出すための課題ベースの原則に基づいて設計されています。これは、英語で効果的にコミュニケーションを取る必要がある現実世界で受験者がどれだけ成功するかを予測するためにこのようなテストを使う際に特に重要です。

TOEFLエッセンシャルズテストのライティングタスクを見て、評価タスク設計のアプローチを例に取りましょう。作文課題は、受験者に執筆の目的と読者を与えると同時に、現実世界で遭遇する内容も反映しています。例えば、画像を説明する文を一つか二つ書くことは、目的や対象のない典型的なテスト課題です。同じ写真説明の課題は、受験者が自分のソーシャルメディアアカウントに写真を投稿し、関連する経験についての詳細な説明を書くことを想像すると、はるかに魅力的で意味のあるものになります。こうした課題は、受験者が英語で何ができるかを多く教えてくれます。

これらのライティング課題は、受験者の異なる習熟度レベルの文章力を最大限に評価するよう設計されています。例えば、ソーシャルメディア投稿課題は、習熟度の初級レベルの学習者を効果的に区別することが研究によれば明らかです。しかし、高度な習熟度の受験者にとっては効果が限られており、全員が良い成績を収める可能性が高いです。これらの高度な習熟度の学習者にとって、学術討論課題は、より高度な言語使用(例:語彙、文法、談話マーカー)を要求し、試験を受ける際に課題を成功裏にこなすため、その能力を区別するという点ではるかに効果的です。総じて、TOEFLエッセンシャルズ試験の作文課題(およびその他の課題)は、受験者が英語で何ができるかを引き出し、英語でコミュニケーションを取る明確な文脈と目的を提供し、異なる習熟度レベルの学習者間で最大限の区別を可能にするように設計されています。これらすべての機能がテストの効果を高め、受験者の英語能力の正確な解釈を支援します。

先進的な評価開発の専門知識を活用

これらの設計原則を活用し、ETSの評価専門家はTOEFLエッセンシャルズで評価される4つのスキル(リスニング、リーディング、ライティング、スピーキング)に関する新しい課題を開発しました。設計プロセスが多段階(プロトタイプ段階、パイロットテスト、フィールドテスト)であったのと同様に、新しいテストコンテンツの開発も複雑で多段階のプロセスを含みます。この開発プロセスの全体的な目標は、生成されるコンテンツがETSの品質と公平性の基準を満たし、内容、難易度、エンゲージメントレベルが類似したテスト体験を提供することです。

評価スペシャリストはこのプロセスの中心におり、最初から最後まで主導します。評価スペシャリストはTOEFLエッセンシャルズテストチームの主要メンバーであり、大学レベルで言語学習や関連科目の訓練を受けた専門家であり、その多くは国際的なK–12の学校、カレッジ、大学で教えた経験があります。多くの評価スペシャリストは、英語を授業言語とする大学で大学院レベルの学位を取得した英語学習者です。

コンテンツ開発プロセス全体を通じて、評価スペシャリストは詳細な仕様に従います。これらの仕様はテスト設計段階で生成され、テスト内のすべてのタスクや項目の作成とレビューに使用されます。例えば、TOEFLエッセンシャルズの作文課題には、テキストの種類や長さ、受験者への指示、使用する音声、グラフィック、写真などが明確に規定されています。テスト課題が作成された後、複数の評価専門家による詳細なレビューや、編集上のレビューや公正性のレビューが行われます。

評価開発のための技術統合

テスト開発プロセスをより効率的にするために、最先端の技術ツールが多数活用されています。例えば、評価スペシャリストは包括的なプラットフォームを使ってアイテムを生成、レビュー、保存します。一部の問題タイプでは、評価スペシャリストが技術支援項目作成(TAIC)と呼ばれる独自の技術機能も利用し、問題作成プロセスを円滑に進めます。TAICは、TOEFLエッセンシャルズテストのために特別に開発された課題内容の仕様と難易度パラメータを統合しています。ただし、これらの問題の内容がTAICで生成された後は、評価専門家による厳格な多段階審査プロセスが行われ、テスト受験者に提示される前にETSの基準と期待を満たしているか確認されます。

こうした慎重で厳密な設計・開発の実践こそが、新しいTOEFLエッセンシャルズテストを、受験者のコミュニケーションにおける英語使用能力に関する信頼できる情報を提供する、有効かつ信頼できるテストにしている理由です。

新しいTOEFLエッセンシャルズ試験について詳しく知りたい方は、https://www.ets.org/toefl/score-users/essentials/about.html をご覧ください。

パブロ・ガルシア・ゴメスはETSのアセスメントデザイナーです。笹山祥子はETSの准研究員です。