e-rater自動採点エンジンは、AI技術と自然言語処理(NLP)を用いて、学生のエッセイの執筆能力を自動採点とフィードバックで評価します。このエンジンは、作家の文法、仕組み、語彙の使い方や複雑さ、文体、構成などについて記述的なフィードバックを提供します。
e評価ツール「スコアリングエンジン」について
誰がe-raterエンジンを使っていて、なぜ使っているのか?
企業や機関はこの特許技術を活用してカスタムアプリケーションを推進しています。
e-raterエンジンはCriterion® オンラインライティング評価サービスで 使用されています。学生はe-raterエンジンのフィードバックを活用して、自分のエッセイ作成スキルを評価し、改善が必要な点を特定します。教師はCriterionサービスを利用して、生徒が独立して文章力を伸ばし、自動化された建設的なフィードバックを受け取るのを支援します。e-raterエンジンは、TOEFL® Practice OnlineやGRE® ScoreItNow!™など、他の低リスクの模擬試験にも使用されています。
高リスクな場面では、このエンジンはGREの分析的ライティングセクションの問題と議論のプロンプト、そしてTOEFL iBT® テストの独立・統合ライティングのプロンプトの人間評価と連携して使用されます。ETSの研究によれば、自動エッセイ採点と人間のエッセイ採点を組み合わせることで、評価スコアの信頼性と測定効果が示されています。
e-raterエンジンの使用についての詳細は、「E-rater as a Quality Control on Human Scores (PDF)」をご覧ください 。
e-rater engineはどのようにしてエッセイを採点するのでしょうか?
e-raterエンジンは、電子的に入力されたエッセイに対して総合的なスコアを提供します。また、文法、用法、仕組み、スタイルと構成、発達に関するリアルタイムの診断フィードバックも提供します。このフィードバックは、学生の回答分析に特化したNLP研究に基づいており、ETSの研究出版物(PDF)に 詳述されています。
e-raterエンジンは人間のレーティングと比べてどうですか?
e-raterエンジンはNLPを用いて、トレーニングエッセイの執筆能力に関連する特徴や、それらが人間のスコアとどのように関係しているかを特定します。得られたスコアリングモデルは、観察された各特徴に重みを割り当て、オフラインのデータベースに保存され、同じ式で新しいエッセイの採点に利用できます。
e-raterエンジンは読み書き能力がないため、人間の評価者のようにエッセイを評価することはできません。しかし、e-rater採点で用いられる特徴は、NLPの最先端を踏まえて、可能な限り実質的に意味のあるものとして開発されています。また、人間の評価者自身よりも高い信頼性を示すために開発されています。
仕組みについて 詳しく学びましょう。
自然言語処理について
e-raterエンジンは、自然言語処理(NLP)を用いる人工知能エンジンであり、NLPはコンピュータサイエンスおよび言語学の分野であり、テキストの特徴を計算手法で解析します。NLP手法は、機械翻訳、音声認識、情報検索といった急成長する応用分野をサポートしています。