OpenAI自去年11月推出聊天機器人ChatGPT後,其驚人的「智力」及數據應用能力在各大考試無往不勝,不過,這次ChatGPT似乎踢到鐵板,挑戰被譽為「世界最難考試」之一的印度公務員國考時,答對率僅剩一半,最終並未通過考試。
ChatGPT先前曾在各考試過關戰將,有賴於其強大的數據庫及學習能力,不但通過美國頂尖大明尼蘇達大學法學院以及賓州大學華頓商學院的考試、甚至考取Google三級編碼工程師資格、美國執業醫生資格。
據印度《Analytics India Magazine》科技趨勢雜誌報導,為測試ChatGPT能力,他們將 2022年的印度公務員考試初階試題丟進ChatGPT對話框裡,結果顯示,總共100 個問題ChatGPT 僅正確回答了其中的 54 個,因部分題目設有倒扣機制,最終分數未達及格標準。
報導表示,印度公務員考試範圍涵蓋地理、經濟、歷史、生態、普通科學到具有和國際重要時事、社會發展和政治,而ChatGPT 的數據庫僅更新於2021 年,而無法回答有關時事的問題,另外,ChatGPT甚至還會自創答案,明明選項只有A到D,結果其答案竟有「E,以上皆無」。
據了解,印度公務員國考是世界上最難的考試之一,去年一年就有近 115.2 萬名人參與考試,但錄取率只有5%,不過其公務員身分享有很高的社會地位,外加就業、居住及醫療等保障,每年仍吸引數以百萬計印度人報考。
印度公務員國考是世界上最難的考試之一,去年一年就有近 115.2 萬名人參與考試,但錄取率只有5%,圖為2022年印度公務員國考題目。 圖:翻攝自推特