新研究: ChatGPTが学生を上回る成果、医学クラスでAIの優位性示す
Tokyo研究者たちは、生物医学と健康情報学に関する大学の講義でAIモデルを試験しました。オレゴン健康科学大学(OHSU)のウィリアム・ハーシュ医学博士とケイト・ファルツ・ホリスは、これらのAIモデル、特にChatGPTが授業でどの程度の成果を上げるかを確認したかったのです。驚くべきことに、AIモデルは人間の学生の最大75%よりも高い成績を収めました。
研究者たちは6つのAIモデルを使って、その性能をテストしました。これらのモデルに2023年に生物医学および健康情報学の授業を受けた139名の学生と同じ試験を与えたところ、AIは選択式クイズと短い記述式の最終試験で上位50%から75%に入るスコアを記録しました。この発見は、今後の従来の試験方法の見方や使用法に変化をもたらすかもしれません。
以下は主なポイントです:
- 6つの生成AIモデルを試験しました。
- 139人の学生を対象に評価しました。
- AIモデルは50パーセンタイルから75パーセンタイルの上位にランクインしました。
- 選択式問題と短文回答の試験を使用しました。
AIは知識ベースの試験を非常にうまく処理することができます。これは、一部のコースにおいて、特に事実に基づく知識に関して、伝統的な学習の強力な代替手段となる可能性を意味します。しかし、これらのタスクにAIを使用することによって新たな問題も生じます。AIモデルは、学生が教材に深く関与する意欲を減じ、受動的な学習環境を生み出してしまうのでしょうか?
教育におけるAIの使用には重要な倫理的問題があります。AIが情報をより良く記憶し処理できるとすれば、不正行為についての懸念が生じます。教師はどのようにして、生徒が本当に学んでいるのか、それともただAIを使って良い成績を取っているだけなのかを確認することができるでしょうか。
高等教育の目的は、単に知識を持つだけでなく、実際の状況でその知識を活用できる専門家を育成することです。良い判断を下したり、細部を理解したり、大局を見る力は、現在のAIモデルではまだ実現できていない分野です。したがって、知識だけでなく、批判的思考や問題解決能力を評価する新しい方法を開発することの重要性が示されています。
AIモデルは学習をサポートできますが、専門的な仕事には深い理解と批判的思考が必要であり、それを置き換えるべきではありません。科学と技術は急速に変化し、しばしばAIの進化を超える速度で進みます。したがって、教師はAIが得意ではないスキルを重点的に問う試験を作成すべきです。
OHSUでの実験は、学生が依然として科目をしっかり理解できる方法で教育にAIを活用する方法を示しています。
この研究はこちらに掲載されています:
http://dx.doi.org/10.1038/s41746-024-01251-0およびその公式引用 - 著者およびジャーナルを含む - は
Hersh, W., Fultz Hollis, K. Results and implications for generative AI in a large introductory biomedical and health informatics course. npj Digit. Med., 2024 DOI: 10.1038/s41746-024-01251-02024年11月20日 · 13:04
AI安全対策会議:バイデン政策に逆行する専門家たち
2024年11月20日 · 12:56
AIが触覚を獲得:量子技術で表面を識別する新時代へ
2024年11月19日 · 20:02
モバイル時代のAI革命: CALDERAで進化する次世代小型言語モデル
この記事を共有