AIが作成した試験答案が94%の確率で見分けられないと判明した研究

読了時間: 2 分
によって Jamie Olivos
-
AIによって作成された試験の回答が自動採点システムから欠落している。

Tokyoイギリスのレディング大学の研究者たちは、試験の採点者がAIによって作成された回答を見逃すことが多いことを発見しました。この研究は、心理学・臨床言語学部のピーター・スカーフ准教授とエティエンヌ・ロエシュ教授によって主導されました。研究によると、ChatGPTで生成された回答は94%の確率で見逃されていました。

このテストは学部の心理学の授業を対象に行われました。AIによる作成回答は気づかれず、実際に実際の学生が書いたものよりも良い評価を受けました。研究者たちは、この結果から教師がAIが学業の評価方法に与える影響を迅速に理解する必要があると述べています。

この研究ではいくつかの重要な点が発見されました。

  • AIによる回答の94%が見逃された。
  • AIの回答は一般的に高い評価を受けた。
  • Readingの研究は、この分野で最大かつ最も信頼性の高い盲検テストである。

研究の影響で、大学の指導者たちはその方針を再検討しています。レディング大学では、教育におけるAIの活用について、教職員と学生に新たな指針を示しました。ロエッシュ教授は、AIの利用とそのクレジットの仕方について、教師がどのように対処すべきか決定する必要があると述べています。この問題は、教育および社会の信頼維持にとって重要です。

ロイシュ教授によれば、研究結果は行動を起こす必要性を示していると言います。全体の10%未満の学校しか生成AIに関する規則を持っておらず、多くの課題が残っているということです。UNESCOの調査によれば、450の学校や大学がその準備不足を浮き彫りにしています。スカーフ博士によれば、多くの学校で従来の試験がより包括的な評価方法に置き換えられているとされています。しかしながら、AIが世界的にどのような課題をもたらすかを理解することが重要です。

レディング大学は学問の水準を維持することにおいて優れた手本を示しており、そのためにシステムの点検と改善を行っています。教育と学生体験担当の副学長であるエリザベス・マククラム教授は、AIが私たちの生活の多くの側面、特に学び方に変革をもたらすだろうと述べています。

大学は大規模なプロジェクトに取り組んでおり、学生の体験を向上させ、就職に役立つスキルを身につけさせるために、より多くのテクノロジーを活用しています。この計画の一環として、古い試験方法を職業スキルに対応した方法に変更し、AIの活用も取り入れています。

新しい教育方法の共有は、世界の教育にとって重要です。これにより、学生は自分の知識や能力をよりよく示すことができます。ロエッシュ教授は、特にAIの発展に伴い、厳格な学術および研究基準を維持することが重要であると強調しました。

レディング大学は、世界の教育機関に対して自分たちの取り組みに倣うよう呼びかけています。学校はAIに関する新しいルールとガイドラインを作成する必要があります。これは、教育評価を公正に保ち、公共の信頼を維持するために重要です。研究者たちは、この新たな課題に対処するため、早急な対応を求めています。

この研究はこちらに掲載されています:

http://dx.doi.org/10.1371/journal.pone.0305354

およびその公式引用 - 著者およびジャーナルを含む - は

Peter Scarfe, Kelly Watcham, Alasdair Clarke, Etienne Roesch. A real-world test of artificial intelligence infiltration of a university examinations system: A “Turing Test” case study. PLOS ONE, 2024; 19 (6): e0305354 DOI: 10.1371/journal.pone.0305354
人工知能: 最新ニュース
次を読む:

この記事を共有

コメント (0)

コメントを投稿