食わない！ChatGPTが法科大学での試験に合格しました

ミネソタ大学ロースクールのジョナサン・チョイ・ディ教授、ペングジチャットGPT。(写真:ツイッター@JonathanHChoi)

ジャカルタ-OpenAIによって作成されたChatGPTは、憲法から課税や損失に至るまでのさまざまなトピックに関するエッセイを書いた後、最近、法的な試験に合格しました。

チャットボットは、ミネソタ大学で4つのコースを修了し、ペンシルベニア大学のウォートンビジネススクールで別の試験を完了することができました。

ChatGPTが4つのコースの試験でどれだけうまく答えを生成できるかをテストするために、ミネソタ大学ロースクールのジョナサン・チョイ教授は最近、ボットに質問のスタックを配置しました。

ボットは95の多肢選択問題と12のエッセイの質問を正常に完了し、ボットはクラスで低い点数を達成することで全体的なC +スコアを獲得しました。

「エッセイを書くにあたり、ChatGPTは基本的な法の支配を強く理解し、一貫して堅実な組織と構成を持っています」と教授は今週初めに発表されたChatGPTは法科大学院に行くというタイトルのホワイトペーパーで述べました。

🚨🚨 新しいホワイトペーパー!私たちはChatGPTを使用して試験を作成し、ミネソタ州の実際の法学部の学生と一緒に盲目で採点しました。ChatGPTは、詐欺法、従業員福利厚生、税金、不法行為でC +平均と低いが合格点を取得しました。1/5 https://t.co/sN8uW4qtnR

— ジョン・チョイ(@JonathanHChoi)2023年1月24日

「(ただし、ボットは)オープンプロンプトが表示されたときに問題を見つけるのに苦労することがよくあります。法科大学院の試験のコアスキル」と彼は付け加えた。

Choi氏によると、このテストの目的は、弁護士が実際に行う文章を模倣することが多いため、教授によって許可されているかどうかにかかわらず、弁護士の実務を支援し、試験で学生を支援するChatGPTの可能性を探ることです。

「ChatGPTは、潜在的な法的問題の発見や、事件の事実に法の支配を適用する詳細な分析など、法科大学院の試験の最も古典的な要素に苦労しています。しかし、ChatGPTは、学生が洗練できる最初のドラフトを作成するのに非常に役立ちます」と、チェは1月27日金曜日に引用されたCNNインターナショナルに説明しました。

彼は、人間とAIのコラボレーションがChatGPTや同様のテクノロジーの最も有望なユースケースであると主張しています。Choiは、このテクノロジーが貴重な教材になる可能性があることを示唆しました。

「全体として、ChatGPTは単独で行動する優れた法学部の学生ではありません。しかし、ChatGPTのような言語モデルが人間と協力することで、試験を受ける法学部の学生や弁護士の練習に非常に役立つことを願っています」とChoi氏は述べています。

一方、ChatGPTは、ペンシルベニア大学ウォートンビジネススクールの経営管理コース試験で、BからB-の成績を獲得しました。

ウォートンのビジネス教授であるChristian Terwiesch氏は、そのパフォーマンスを詳述した論文で、ChatGPTは基本的な運用管理とプロセス分析の質問に答えるという優れた仕事をしているが、より洗練された手がかりに苦労し、基本的な数学で驚くべき間違いを犯していると述べた。

とはいえ、チャットボットは、エラーを指摘した後に回答を作り直すなど、人間の手がかりに応じて回答を修正するのに優れており、人々がAIと連携する可能性を示唆しています。

残念ながら、少し前まで、ニューヨークや他の管轄区域の当局者は、学校でのChatGPTの使用を禁止しました。ChatGPTが試験で平均以上の成績を収めたことを考えると、Terwieschは、学生が試験を受けるときに制限を設ける必要があることに同意しました。

「禁止が必要です。結局のところ、あなたが医者の学位を与えるとき、あなたは彼らにボットの使い方ではなく薬を知ってもらいたいのです。法務やビジネスを含む他のスキル認定についても同じことが言えます」とTerwiesch氏は述べています。

参考までに、ChatGPTは2022年11月末に一般公開されましたが、OpenAIはソフトウェアがまだ進行中であることを明らかにしましたが、自己作成の自然言語ライティングで信頼できる結果をもたらし、センセーションを巻き起こしました。