ChatGPTはMBA試験を受けました。その様子は次のとおりです

istock.jpg

ペンシルベニア大学ウォートン校の教授は、典型的な MBA コースの最終試験のために生成された解答を採点した後、ChatGPT に理論上の B グレードの合格を与えました。

ウォートン大学の運用管理教授、クリスチャン・ターウィシュ氏は、ChatGPT が「基本的な運用管理とプロセス分析の質問において素晴らしい仕事をする」と述べた。

「答えが正しいだけでなく、説明も素晴らしい」と彼は新しい白書に書いている。

関連記事: ChatGPT の使用を開始する方法

しかし同氏は、チャットボットは「小学6年生の数学レベルの比較的単純な計算で驚くべき間違い」を犯しており、現在はより高度なプロセス分析の質問には対応できないと付け加えた。一方、ChatGPT の現在のバージョンは、人間のヒントに応じて回答を変更し、正しい解決策に到達することができます。

「このパフォーマンスを考慮すると、Chat GPT3 は試験で B から B- の評価を得ていたでしょう」と Terwiesch 氏は書いています。

Terwiesch の質問のいくつかは、ChatGPT が、異なるスループット容量を持つ複数のマシンによる処理操作のボトルネックを特定できるかどうかをテストすることを目的としていました。

しかし、ChatGPT は中レベルの算術演算で計算する際に「大規模な重大な間違いを犯しました」。

興味深いことに、ChatGPT は当初、キュー分析に関する Terwiesch の質問の 1 つに対して誤った回答をしていました。彼はより良い答えを得るためにヒントを与え、ChatGPT が答えを改善しました。翌日、教授はヒントなしで同じ最初のキューイングの質問をしたところ、ChatGPT は最初の試行で正しく答えました。

「過去のフィードバックから学習できるか、あるいは私が単に幸運に恵まれたかのどちらかです」と彼は指摘し、回答の質には多少のランダム性があるようだと付け加えた。

Terwiesch はまた、ChatGPT が将来の試験で使用できる賢くてユーモアのある質問を作成できることにも気づきました。ただし、チャットボットには、いくつかの質問に微妙な欠陥があり、回答が不可能になっていました。

また:ChatGPTには「深さと洞察が欠けていた」と権威ある科学雑誌編集者が言う

Terwiesch 氏は、ChatGPT の機能と制限に注意するよう他の人に警告しています。彼は、最初の質問に対する回答を読んだ後、ChatGPT に「恋に落ちた」と述べていますが、「いくつかの非常に単純な状況で大きな間違いを犯した」と警告しています。

「複雑な問題に関してはまだ A+ には程遠く、依然として人間の介入が必要です」と彼は書いています。

「教育についての私の見解では、電卓は 50 年以上にわたって広く使用されており、生徒は Google Wikipedia を使って答えを見つけることができますが、小学生は依然として 7 x 7 = 49 とペンシルバニア州の州都がハリスバーグであることを学ぶ必要があります。ほとんどの事実に関する質問に対応します。より高度なトピックを理解するために必要なのは、基礎的なスキルの性質です。」

Terwiesch 氏は、幼稚園から高等学校までの生徒が課題や試験でカンニングするために ChatGPT を使用する可能性があることを教育者が懸念すべきであることに同意します。たとえば、ニューヨーク市教育省は最近、チャットボットを禁止しました。これは、教育においては信頼できるテストが重要である一方、新しいテクノロジーによってスキル認定が危険にさらされるべきではないためです。 ChatGPTを使用する学生は、「平均的な学力」を持つ友人に電話して、代わりに試験を受けてもらうことができるようなものだと同氏は指摘する。

しかし同氏はまた、ChatGPTや同様のテクノロジーには「賢いコンサルタント」の役割を果たす能力があるとも主張する。つまり、エレガントではあるがしばしば間違った答えを生み出すコンサルタントであり、これは、必要なMBA学生がスキルを開発するための「完璧な訓練場」であると信じているという。提案された代替案を批判的に評価します。

関連記事

もっと見る >>

HIX.AI で AI の力を解き放ちましょう!