Altman幾乎承認跑過純AI資料訓的模型，還說數學上已經不需要人類資料

Altman 在《大西洋月刊》CEO Nicholas Thompson 的播客中聊到合成資料。Thompson 說現在網上到處是 AI 寫的內容，人連寫作風格都在學 AI，未來模型不可能不吃到 AI 生成的資料。他說「GPT-4 是最後一個沒怎麼用 AI 資料的模型」，Altman 點頭同意。 Thompson 直接追問：有沒有跑過完全用合成資料（用 AI 的輸出來訓下一代 AI）訓練的模型？Altman 停了一下，說「我不確定該不該說」。這句話等於預設了。他緊接著說，模型的核心就是學會推理，這件事純合成資料完全能做到。 他拿數學打比方：一個完全沒見過人類資料的模型，能不能比人類算得更好？「我覺得可以。」但反過來，一個沒接觸過人類文化的模型，能不能理解人類的價值觀？「那大概不行。」 合成資料一直有「瘋牛病」的說法：AI 反覆吃自己的輸出，資訊會不會一代代退化變質。按 Altman 的說法，教 AI 算數學不需要人，教 AI 理解人才需要人。 [動察 Beating]