ETSのテストセキュリティについて知らなかった5つのこと

レイ・ニコシア著

アメリカ合衆国ニュージャージー州プリンストン(2022年6月3日) — ETSでの評価のセキュリティを維持することは、何十年にもわたる取り組みでした。試験が紙と鉛筆からコンピューターベース、試験場から自宅へと移行する中で、試験業界の変革は大きくなりました。この進化とともに、セキュリティを新しく異なる視点で捉える必要性が生まれ、私たちは常に必要最低限、さらにはそれ以上のことをして、不正を試みたりテストの信頼性を損なおうとする者たちに先んじたりし続けていると認識しています。

テストセキュリティ分野は複雑ですが、ETSのテストセキュリティについて知らない(しかし知っておくべき)5つのポイントをご紹介します。

1. ETSの試験誠実性局(OTI)は、64年以上にわたり試験詐欺や不正行為と戦ってきました。

64年間にわたり、ETSは調査員、専門家、アナリストで構成される専任のOTIオフィスを配置し、試験の妥当性と誠実性を確保し、誠実に受験する受験者を守ることに努めています。高度な訓練を受けた監督官、AI技術、データ分析と連携し、チームは不正に取得または実施されたと疑われるスコアやテストセッションを分析し、証拠があればスコアを取り消します。業界のリーダーとして、OTIオフィスは世界中で不正行為と戦うためにさらなる取り組みの必要性を認識しています。

2. ETSは過去60年間で、不正対策のためにテストセキュリティおよび技術インフラに数十億ドルを投資してきました。

ETSは過去数年間、テストセキュリティおよび技術インフラに毎年数千万ドルを投資しており、過去60年間で数十億ドルにのぼります。今後数か月で、技術力の向上とテストセキュリティ対策の強化に数千万ドルの追加投資を計画しています。これらの能力と改善には、ETS独自の専門知識と能力を用いて、世界水準の試験セキュリティ対策を維持するための新しい統合技術を用いたリモートアクセスソフトウェア(RAS)の継続的な防止が含まれますが、これらに限定されません。不正な試験行動を高い確率で検出し続けるように機械学習モデルの強化、不正行為の特定と不正行為者の摘発を支えるための既存の統計評価モデルの新開発および改良;そして不正対策に特化した新しい問題タイプや評価設計アプローチの継続的な研究を行っています。私たちが行っている投資は、問題の調査、スコアの取り消し、テストポリシーに違反した個人の責任追及を目的とした厳格なセキュリティプロトコルと品質管理手続きに加えたものです。

3. ETSは、受験者や機関に成績が公開された後でも、テストスコアを取り消すことができ、実際に行っています。

ETSが受験者のスコアが不当に取得された可能性がある証拠がある場合(これは私たちのテストポリシー違反)、OTIはスコアの公開を保留し、テストセッションの評価や得られたスコアをさらに評価し、そのスコアを取り消すべきかどうかを判断することができます。場合によっては、スコアがすでに受験者や機関に公開されていても、不正な優位性によって得られたと判断される証拠が公開後に収集された場合、スコアを取り消すこともあります。最も極端な場合、ETSはテスト方針に違反した受験者を禁止します。

4. 標準化評価でのカンニングはETSだけのものではありません。

不正行為は業界全体で問題となり、過去2年間のリモートテスト業界の急成長によって注目を集めています。教育分野ではあまり議論されませんが、私たちは関係者に対して、私たちが目にしていること、懸念への対応方法、将来の計画を常に伝える義務があります。テストセキュリティは、スコアが有効で信頼性が高く、信頼できるものであることを保証するエンドツーエンドのテストプロセスの最も重要な柱の一つであることを私たちは認識しており、テストセキュリティとリモートテストの分野をリードする組織として、誠実にテストを行う受験者を守る責任を真剣に受け止めています。私たちは、世界中の機関にも、重要な決定においてスコアに依存するサービスを提供することに同様にコミットしています。信頼性の低いスコアは、準備不足の学生に影響を及ぼし、高等教育プログラムの厳しさを満たせない結果、苦労して築き上げた機関の評判に悪影響を及ぼします。スコアの取消は、テスト組織による良好な執行の兆候であり、そのような取消がないことは、機関や関係者双方に警戒すべきです。

5. 自宅での評価は、受験者の不正行為の増加に寄与しています。

新しい在宅試験の提供モデルにより、ETSは2年目(FY21)の在宅試験2年目(FY20)と比べて、TOEFL^® およびGRE^® の両試験実施を合わせてスコア取消件数が200%以上増加しました。この増加はありましたが、それは私たちの警戒心が弱まったという意味ではありません。実際には、その逆であり、徹底的な分析と調査を経て不正行為を特定し、スコアを取り消す能力がそれを証明しています。不正行為の試みは増えていますが、デフォルトでキャンセルされるスコアも増えています。受験者がリモートアクセスソフト、プロキシテスト、携帯電話によるメッセージの送受信、さらにはこれらと他の不正手法の組み合わせを使って不正を試みる例も見てきました。OTIチームはテストセキュリティの第一線の専門家で構成されており、評価で不正を試みる受験者を確実に捉え、抑止するために常に先を行っていきたいと考えています。

レイ・ニコシアはETSのテストインテグリティオフィスのテストセキュリティ担当プリンシパルです。

ETSについて

ETSでは、厳密な研究に基づく評価を作成することで、世界中の人々の教育における質と公平性の向上に取り組んでいます。ETSは、教員資格取得、英語学習、初等・中等・高等教育向けのカスタマイズされたソリューションを提供し、教育研究、分析、政策研究を行うことで個人、教育機関、政府機関にサービスを提供しています。1947年に非営利団体として設立されたETSは、世界180か国以上、9,000以上の拠点で年間5,000万件以上のテストを開発、実施、採点しています。これには TOEFL^® や TOEIC^® のテスト、 GRE^® テスト、 プラクシスシリーズ^® の評価が含まれます。

www.ets.org