“GPT-4 變傻” 不只是 OpenAI 的苦惱,所有大模型與人類交往越久就會越蠢?

華爾街見聞
2024.01.03 05:45
portai
我是 PortAI,我可以總結文章信息。

ChatGPT 發佈一年多,已經在全世界累積了超過 1.8 億用户。但最近關於 GPT-4 在 “變笨”、“變懶” 的説法不斷。研究發現,大模型在處理早期數據時展現出的優異表現實際上是受到了「任務污染」的影響。這種污染使得大模型更像是一種檢索的模擬智能方法,回答問題全靠記,而非純粹基於學習理解能力。許多大模型在處理早期數據時表現出色是因為它們在預訓練數據中已經 “見過” 這些任務。