MIT 的全新研究顯示,生成式 AI 并非推理能人,反倒更貼近記憶大師。
麻省理工學(xué)院的計算機科學(xué)與人工智能實驗室(CSAIL)當(dāng)中的一項新研究表明,這些實力強勁的大型語言模型(LLM)似乎更多的是仰仗記憶,而非真正的推理能力。它們在熟悉的任務(wù)里表現(xiàn)極佳,然而在遭遇新問題時,卻顯得束手無策。
研究者們通過對照 AI 在各種不同任務(wù)中的表現(xiàn),得出了此結(jié)論。例如,GPT-4 在十進制的算術(shù)方面表現(xiàn)非凡,但是在其他進制之下卻難以應(yīng)對,類似的狀況也在棋類游戲以及空間推理等領(lǐng)域顯現(xiàn)。
研究人員認(rèn)為,AI 更仿若擁有超級強記憶力的“鸚鵡”,而非具有真正推理能力的“智者”。
研究成果說明,AI 在經(jīng)受訓(xùn)練的領(lǐng)域內(nèi)能夠甚至超越人類的水平,不過這更多的是“記憶力”的呈現(xiàn)。一旦碰到全新的挑戰(zhàn),需要真正的推理能力之時,AI 的優(yōu)勢便不再顯著。