NAEPサマーインターンブログシリーズ:評価における公平性と公平性について学ぶ

2021年12月8日

夏の間、私たちはNAEPのインターンたち自身の言葉での経験を紹介しています。 

今週の投稿はジャニーン・ジャクソンとクリストファー・テラザスの両者の視点から述べています。この夏、ジャニーンはETSの政策評価・研究センター(PERC)で上級研究科学者兼戦略顧問のキャサリン・ミレットと協力し、将来の大学院生プロフィールを探るプロジェクトに取り組んでいます。クリストファーはETSの研究科学者ジェフリー・フェルプスとカーラ・カハラン・ライトゥシス、そしてNAEPプログラムの上級プログラムアドバイザーであるジャン・ドーティ・ベリーと協力し、共感マップを用いてNAEPにおける教師と生徒の視点を探る可能性を分析するプロジェクトに取り組んでいます。こちらが、評価における公平性と公正性について、スタッフから学んだ最新の見解です:

ジャニーン・ジャクソン:

まず最初に言いたいのは、夏があまりにも早く過ぎていき、この経験が終わってほしくないので、時間がゆっくりと流れるようにと絶えず祈っているということです。「測定」に情熱を持つ人々と出会い話す機会と空間があることは、本当に刺激的です。ここ数週間は本当に素晴らしかったですが、特にこの一週間は本当に素晴らしかったです。

私とインターンの仲間は、ETSの研究開発スタッフであるマイケル・ウォーカー、カーラ・カハラン・ライタシス、ランディ・ベネット、ヘイリー・レンプと会い、評価と学習における公平性、公平性、アクセシビリティについて学び、議論しました。評価における公平性と公平性の問題がETSにとって長年にわたり注目されてきたことは、励みになります。パネルによると、常に「害を及ぼさない」という努力がなされており、差別的機能分析(DIF)と問題内容のレビューを通じてバイアスを特定し、除去し、防止することを目指しています。害を及ぼさないよう継続的に取り組むことに加え、社会正義に寄与する学習ツールや評価製品の開発にも力を入れています。さらに、AIの観点から見ると、ETSではユニバーサル・デザイン・フォー・ラーニング(UDL)フレームワークから得られた洞察を取り入れ、最初から最後までアクセスしやすく公平なユーザー体験を重視して製品を設計する多くの取り組みが行われています。この種の仕事には多くの思考と調査が必要であり、議論に多様な声や経験を含めるための努力がなされています。それはちょうど月曜日のことです。

火曜日には「アイテムの生命」について学びました。構想から管理、採点や報告まで、単一のテスト項目を作成するまでに数か月の作業が費やされます。誰が知っていたでしょうか?!心理測定学者を目指す者として、評価開発の卓越性で知られる組織から各ステップを詳細に学んだことで、理解の深さは飛躍的に深まりました。

また今週は、同じ背景や興味を持つETSスタッフとマッチングし、プロジェクトから離れてETSでの就職までの道のりや日々の仕事経験、そして仕事に伴う成功や課題について話す時間が与えられました。幸運にも新製品開発のケルシー・トーマスとマッチングし、楽しく有益な会話を楽しみました。これまで出会ったすべてのスタッフと同様に、ケルシーは私の考えや視点に耳を傾け、私の研究について洞察を提供できる他のETSスタッフを紹介してくれました。そのことに感謝しています。

週の締めくくりとして、それぞれの大学やカレッジの卒業生とお会いすることができました。同じくモーガン州立大学の卒業生であるアイシャ・トーレスに会えたことはとても刺激的でした。彼女は大学での教育と経験がETSでの仕事にどのように準備されたかを共有してくれました。カリキュラムの整合性、ネットワーキング、多様性トレーニングについて詳しく話し合い、会話の最後には、私は大学院生であり、国の宝であるモーガン州立大学に通うことをさらに誇りに思いました。

毎週ETSでの経験は良くなっています。私は、他者に意味のある影響を与えるかもしれない研究に貢献していると確信しています。政策評価・研究センター(PERC)のメンターやチームメンバーであるキャサリン・ミレット、マリソル・ケヴェルソン、アンジャリ・スリヴァスタヴァは、この短い期間で私がライターおよびデータアナリストとして成長するのを助けてくれました。 朝起きて仕事にワクワクする気持ちはとても良いです。来週が楽しみです。

クリストファー・テラザス:

先週は、評価における公平性と公平性について議論するセミナーに参加することができました。このテーマは私の心にとって非常に大切なもので、過去3年間は教室の教師として働いていました。その場で、若者の声、経験、アイデンティティを尊重する環境を作り育むことができました。これは公平性の働きです。

マイケル・ウォーカー氏は、著名な大統領任命者であり、ETSの学習・公平性研究センターの所長で、セッションを主導し、その間、各インターンが自己紹介を少し共有する時間も提供しました。これにより、すべてのインターンが互いの声や経験、そして生きたアイデンティティに耳を傾ける場を作り出しました。彼は思いやりがあり力強い雰囲気を作り出しました。彼はまさに私が教室の教師としてやっていたことをやってくれました。マイケルも力強いコメントをしました。彼はこう述べました。「ETSが公平性を促進するために行っている重要な取り組みの一つは、多様なインターングループを招き、私たちと一緒に働き、皆さんの知識を教えることだからです。今後も連絡を取り合い、この分野を正しい方向へと押し進めるために協力していく」と述べました。電話会議に参加したもう一人のETSメンバーは、マネージング主任研究科学者カーラ・カハラン・ライトゥシスでした。カーラはセッション中に私たち全員に一言言及し、それがとても力強いと感じました。彼女は「...多様なチームを持つだけでなく、人々が声を上げる力を与えることでもあります。」

私たちの会議で述べられたこれらのコメントは、これら2人のETS参加者とETSが教育における評価の公平性と公平性を高める上で持つ価値を示しています。この仕事が、制度が疑問視されている今、これまで以上に重要であることは明らかです。

ジャニーン・ジャクソンはNAEPサマー博士前研究経験(SPRE)インターンで、現在メリーランド州ボルチモアのモーガン州立大学で心理測定学の博士号取得を目指しています。クリストファー・テラザスは、現在テキサス大学オースティン校で博士号取得中のNAEPサマー・プレドクラルリサーチエクスペリエンスのインターンです。