学生の作業に対するフィードバックを提供するために生成 AI を使用すべきかどうかについては議論があります。あ 最近の研究 適切なプロンプトがあれば、AI によって生成されたフィードバックの方が人間の教師からのフィードバックよりも高品質になる可能性があることを示しています。しかし、学生は教師のフィードバックをより効果的に処理したとオミッド・ノルージ氏は言います。 准教授 教育と学習科学。
70 人の学生が実験のために作文を書きました。すべてのエッセイは、経験豊富な教師、または単純または広範な AI プロンプトからフィードバックを受けました。ノルージ氏によると、学生たちは誰から、何からフィードバックを受け取ったのか分かりませんでした。次に、フィードバックがエッセイの弱点を特定したかどうか、それらの弱点を指摘する根拠を提供したかどうか、改善の提案を提供したかどうかなど、いくつかの要素でフィードバックの質が測定されました。
簡単なプロンプトには、エッセイの課題と評価のルーブリックが含まれていました。高度なプロンプトが続行されました。 Noroozi: 「ここでは、予想されるフィードバックの種類の例を追加し、エッセイ内の議論の構造を徹底的に分析するよう求め、より多くのコンテキストを提供しました。」
実験の最初の部分であるフィードバックの提供では、高度なプロンプトからのフィードバックの質は、単純な AI プロンプトや教師からのフィードバックの質よりも大幅に高かったとノルージ氏は言います。 「実験の 2 番目の部分では、より良いフィードバックがより良い調整につながるかどうかを確認したいと思いました。」これが事実であれば、高度な AI プロンプトからフィードバックを受けた学生がエッセイを最も改善したでしょう。しかし、そんなことは起こりませんでした。
Noroozi: 「AI によって生成されたフィードバックはエッセイのあらゆる側面を詳細に扱いますが、教師は最も緊急な問題に焦点を当てることがよくあります。さらに、教師は生徒の背景を知っているので、個々のニーズに合わせてフィードバックを調整できます。簡単に言えば、優れた教師は、生徒が何を改善する必要があるかを正確に知っています。少なくとも当面はそうだ。」
この研究からどのような結論が得られますか? 「教師はフィードバック タスクの一部を生成 AI に委任することができます。これは、多くの教師が直面している過大な作業負荷を考慮すると、非常に実用的になる可能性があります」と Noroozi 氏は言います。 「同時に、人間の教師からのフィードバックは依然として非常に貴重です。私のチームは現在、生成 AI と人間の知能を最適に組み合わせて、人間と AI の間で最適なハイブリッド フィードバックを実現する方法を検討しています。そして、理想的なフィードバック サイクルがどのようなものであるかを経験的に調査します。それは主に人間によって主導されるべきでしょうか、それとも AI によって主導されるべきですか、あるいはその両方の組み合わせによって主導されるべきでしょうか?」
