ChatGPT 參加了 MBA 考試。這是它的做法

istock.jpg

賓夕法尼亞大學沃頓商學院的一位教授在對 ChatGPT 為典型 MBA 課程的期末考試生成的答案進行評分後,給了 ChatGPT 理論上的 B 級通過率。

沃頓商學院運營管理學教授 Christian Terwiesch 表示,ChatGPT“在基本運營管理和流程分析問題上做得非常出色”。

他在新的白皮書中寫道:“答案不僅正確,而且解釋也非常出色。”

另外:如何開始使用 ChatGPT

但他補充說,聊天機器人“在六年級數學水平的相對簡單的計算中犯了令人驚訝的錯誤”,而且它目前無法處理更高級的過程分析問題。另一方面,當前版本的 ChatGPT 可以根據人類提示修改其答案,以得出正確的解決方案。

“考慮到這一表現,Chat GPT3 在考試中會獲得 B 到 B- 的成績,”Terwiesch 寫道。

Terwiesch 的幾個問題旨在測試 ChatGPT 是否可以識別具有不同吞吐量的多台機器的處理操作中的瓶頸。

然而,ChatGPT 在使用中等水平的算術進行計算時“犯了一個嚴重的錯誤”。

有趣的是,ChatGPT 最初錯誤地回答了 Terwiesch 關於排隊分析的問題之一。他提示它提供更好的答案,ChatGPT 改進了它的答案。第二天,教授在沒有提示的情況下向它提出了同樣的初始排隊問題,而 ChatGPT 在第一次嘗試時就回答正確。

他指出:“它要么能夠從過去的反饋中學習,要么只是我很幸運。”他補充說,其答案的質量似乎存在一些隨機性。

Terwiesch 還發現 ChatGPT 能夠提出巧妙而幽默的問題,供他在未來的考試中使用。然而,聊天機器人在一些問題上也引入了微妙的缺陷,導致他們無法回答。

另外:著名科學期刊編輯表示,ChatGPT“缺乏深度和洞察力”

Terwiesch 警告其他人要注意 ChatGPT 的功能和限制。他說,在閱讀了 ChatGPT 對他的第一個問題的回答後,他“愛上了”ChatGPT,但警告說它“在一些相當簡單的情況下犯了重大錯誤”。

“對於復雜問題,我們距離 A+ 還很遠,我們仍然需要有人參與其中,”他寫道。

“在我的教育觀中,小學生仍然需要學習 7 x 7 = 49 以及賓夕法尼亞州的首府是哈里斯堡,儘管計算器已經廣泛使用了 50 多年,學生可以使用 Google 維基百科來查找答案對於大多數事實性問題。他們需要理解更高級的主題,這是基礎技能的本質。”

Terwiesch 同意教育工作者應該擔心 K-12 學生可能會使用 ChatGPT 在作業和考試中作弊。例如,紐約市教育部最近禁止了聊天機器人,因為可靠的測試對教學很重要,而技能認證不應因為新技術而受到影響。他指出,使用 ChatGPT 的學生就像能夠打電話給具有“平均學術能力”的朋友來幫助他們完成考試。

但他也認為 ChatGPT 和類似的技術有能力扮演“智能顧問”的角色——能夠給出優雅但常常是錯誤的答案,他認為這是為需要幫助的 MBA 學生培養技能的“完美訓練場”。批判性地評估建議的替代方案。

相關文章

查看更多 >>

透過 HIX.AI 釋放 AI 的力量!