強化學習之父Sutton另起爐灶，要做會持續學習的AI

2024 年圖靈獎得主、強化學習之父 Richard Sutton 與長期合作者 Khurram Javed 離開 John Carmack 創辦的 AGI 公司 Keen Technologies，共同成立 Oak Lab。Javed 曾師從 Sutton，在阿爾伯塔大學完成計算機博士，長期研究實時強化學習和持續學習。 Keen 本來就研究強化學習和長期執行的智慧體，Oak Lab 則把 Sutton 和 Javed 最看重的持續學習路線單獨拿出來。現在的大多數模型部署後不會繼續根據新經驗更新自身，Oak 則希望 AI 能在執行中不斷從自己的經驗裡學習。 Sutton 認為當前深度學習方法「薄弱且低效」，繼續修補不夠，需要重做基礎方法。Oak Lab 將推進 OaK（選項與知識）架構，讓 Agent 從互動經驗中形成知識，再用世界模型預測行動後果並規劃下一步。 公司的長期目標是打造一個萬億引數 Agent，並把實時學習和規劃的功耗壓到 20W。 [BlockBeats]