OpenAIのChatGPTは回答に失敗するケースがあります。

オープンAIs-ChatGPT.jpg

もう6ヶ月近くになりますが、OpenAIのChatGPTがリリースされています。実際、会社は最近ChatGPT 4を新たに発表しました。このテクノロジーは世界を新たな次のレベルに引き上げました。

ChatGPTはAIによって動作する言語モデルであり、言語の翻訳、情報の要約、質問への回答などの活動を行うことが訓練されました。このモデルの優れた機能は十分に注目されており、その結果、多くの人々が自身の雇用の見通しに疑問を抱いています。

GPT-4言語処理モデルは、大量のデータを分析するために使用することができ、その分析結果に基づいてコンテンツを生成することができます。また、新しいテクノロジーは大量のテキストを分析し、特定のデータポイントに関する情報を消費者に提供することができます。

技術が長く残ることに疑いはありません。もちろん、それはユーザーを多くの方法で助けます。数々の場面で、それはスクリプトの作成から最も難しい問題用紙の解決まで、あらゆることを実行する能力を示しました。ChatGPTが達成できないことはありません。ただし、ChatGPTにとって難しいこともあります。

1. 人工知能を活用したChatGPTは、インドで最も憧れのある共同入学試験(JEE)に合格することができずに挫折しました。共同入学試験はその難しさで有名であり、毎年数千人の学生が参加し、インドで最も名門の工学校への入学を目指しています。この試験は複雑な図表や数値を含む困難な数学的な試験の一つです。

優れた教育機関であるIITやNITに興味を持つ学生は、まず共通入学試験に合格する必要があります。報告によると、ChatGPTはJEE Advanced試験での成績が芳しくありませんでした。

ChatGPTのパフォーマンスがテストでは十分でなかった理由は、合計の問題数のうち11問しか解決できなかったためです。

2. ChatGPTは過去にも、一部が有名であり難しいとされる他のテストで成功しています。驚くべきことに、ChatGPTは医学部入学試験(NEET)の全200問に挑戦し、全問正確に答えることに成功しました。NEETでは、200問中180問の回答が必要です。

それにもかかわらず、ChatGPTは全200問の質問に取り組み、そのパフォーマンスの結果は800点満点中359点となりました。特に、ChatGPTはNEETテストの生物学の部分で非常に優れた成績を収め、そのセクションでの質問への回答の正確性が高まっていました。ChatGPTのNEETテストでのパフォーマンスは、JEE Advanced試験に合格しなかったという事実にもかかわらず、他の領域でも優れた能力を持っていることを示しています。

ChatGPTがJEE Advancedのテストで経験した敗北は、最も先進的なAIモデルにさえ存在する限界を示しています。人工知能はさまざまな産業を破壊する可能性を持っているとしても、難しいタスクで人間の知能と競争できるまでにはまだ長い道のりがあります。

OpenAIのチャットボットChatGPTは、またもや競技試験で成功していません。

3. ChatGPTは、Analytics India Magazine(AIM)の依頼により、インドの合同公務員試験(UPSC)を受けました。UPSC試験は世界で最も厳しい競争試験の一つとされています。年に10万以上の志望者がUPSC試験を受けますが、そのうちわずか5%しか合格できません。

AIMはUPSC Prelims 2022の100の質問をChatGPTに提供しました。

チャットボットはUPSC予備試験2022年の試験で低い成績を収めました。問題用紙1(セットA)でわずか54点を獲得しましたが、合格に必要なスコアは87.54点でした。これは、チャットGPTはUPSCのテストに合格できなかったことを示しています。

質問は、インドの一般的な科学、歴史、地理、経済、生態学、および最新の出来事に関するトピックに基づいていました。チャットボットは、場所や経済に関する質問ではうまくいきましたが、2021年以前に起こった歴史的な出来事について聞かれると、惨めな結果になってしまいました。

ChatGPTのデータセットが2021年までしかカバーしていないという事実が、AIボットが試験のすべての質問に正確に答えられない決定的な要素である可能性があります。

4. それに加えて、ChatGPTのCLAT試験の結果は同様に平均を上回っていました。CLAT UG試験では、AIツールは質問のうち正確に50.83パーセントを解決することができました。ChatGPTは論理的思考と数量論の質問カテゴリでは成功しませんでした。しかし、英語と時事問題のカテゴリでは非常に優れた結果を出しました。概念に基づいた質問に関しては、このツールは非常に苦労しました。

2022年11月にリリースされたChatGPTは、アメリカ合衆国で非常に好評を得ています。この人工知能技術は、アメリカの医師国家試験(USMLE)や様々なMBA試験において成功を収めています。さらに、Googleのレベル3エンジニア向けのコーディング面接でも合格することができました。

最近、ChatGPTが犬の状態を正しく診断し、動物の命を救ったことに、獣医の専門家たちは驚きました。

多くの国々は、最近のChatGPTに対して対照的な意見を持ち、新しいイノベーションに対して強硬な措置をとる準備をしています。最近、ドイツイタリアを含む2つの主要な国でこの技術が禁止されました。これらの国々は、OpenAIのChatGPTが未成年者が攻撃的なコンテンツにさらされることを防ぐための保護策が不足していると主張しています。たとえば、年齢確認システムなどがありません。

ウルリッヒ・ケルバー、ドイツのデータ保護委員は、ユーザーデータのセキュリティに関する懸念から、Chat-GPTがイタリアで起こったような潜在的な禁止の対象になる可能性があると警告しました。

まあ、さて、将来の人工知能搭載技術の挙動を見てみましょう。

お読みいただきありがとうございます!もっと情報のある記事をお楽しみに!

関連記事

もっと見る >>

HIX.AI で AI の力を解き放ちましょう!