Gary Marcus
認知科學家、AI 批評者與作家
關於
Gary Marcus 是科學家、暢銷書作家,也是紐約大學心理學與神經科學榮譽教授。他是當前深度學習方法最具代表性的批評者,主張大型語言模型缺乏真正的理解能力,並認為要實現 AGI,必須採用結合神經網路與符號推理的混合架構。他創辦了 Robust.AI 與 Geometric Intelligence(後被 Uber 收購),並著有《Rebooting AI》與《Kluge》。
主要貢獻
- 很早並持續主張深度學習系統缺乏穩健抽象、因果與組合式推理能力
- 倡導神經符號混合架構,作為超越單純模式匹配的 AI 路線
- 將 AI 論點連接到《The Algebraic Mind》《Kluge》等早期認知科學著作
- 創辦 Geometric Intelligence(後被 Uber 收購),並創辦 Robust.AI 追求更可靠的 AI 系統
- 共同著有《Rebooting AI》,將對脆弱性的技術擔憂轉化為面向大眾的 AI 炒作批判
- 他的懷疑論在某些失敗案例中顯得有先見之明,但好辯風格與反覆近程批評也讓他成為兩極化人物
影片與訪談
Are We at the End of AI Progress? — With Gary Marcus
Examining whether current AI approaches are hitting fundamental limits
View Details
Gary Marcus on the Massive Problems Facing AI & LLM Scaling
The Real Eisman Playbook Episode 42 - Discussion on fundamental challenges facing AI progress and LLM scaling limits
View Details
Gary Marcus: Toward a Hybrid of Deep Learning and Symbolic AI
Lex Fridman Podcast #43 - Deep conversation on why deep learning alone isn't enough for AGI
View Details思想連結
約書亞·班吉歐
觀點交鋒AI 先驅與安全研究者
2019 年 10 月,Marcus 發表了一篇長文回覆 Bengio;同年 12 月,Montréal.AI 把兩人請上同一個舞台,舉辦第一屆 AI Debate——大數據與深度學習本身,足以抵達通用智能嗎?這場交鋒真正值得讀的地方,在於他們讓步了多少:兩人都同意深度網路的泛化能力薄弱,也都希望把因果與 System 2 推理納進來。分歧只在於符號操作究竟必須被內建、還是可以被學會——而這道裂縫,此後貫穿了每一場關於規模的爭論。
medium.com · syncedreview.com
Blaise Agüera y Arcas
觀點交鋒Google 副總裁暨 Fellow
2023 年 10 月,Agüera y Arcas 與 Peter Norvig 在《Noema》上主張通用人工智慧已經到來,理由是前沿模型能勝任它們從未被訓練過的任務。一週後,Marcus 與 Ernest Davis 撰文回應,稱之為一場史詩級的移動球門,並列舉出模型至今仍做不到的純語言任務。這場分歧與其說是關於能力,不如說是關於誰有資格設定門檻——這也是為什麼「AGI 來了嗎」總是塌陷成「你說的那個詞到底是什麼意思」。
garymarcus.substack.com · noemamag.com
楊立昆
觀點交鋒首席 AI 科學家・Meta
他們的爭論比 LLM 時代更早:2017 年 10 月,兩人在紐約大學以〈AI 需要更多先天結構嗎?〉為題同台——Marcus 堅持從零學起永遠長不出結構化的推理,楊立昆堅持外加的結構會過時,結構本身也該是學來的。十年的規模擴張過去,雙方立場幾乎沒有移動。兩相對讀就會發現,今天關於模型究竟會不會推理的爭吵,其實是一場換了新數字的舊爭吵。
youtube.com
François Chollet
思想同道AI Researcher & Creator of Keras
同一個異議的兩種版本,語域不同。Marcus 以文章與著作論證深度網路缺乏穩健的抽象能力,一離開訓練分布就會崩壞;Chollet 則選擇造一個基準——ARC,由任何訓練集都不包含的任務組成——把同樣的主張變成一件實驗室可以當眾失敗的事。兩相對讀,就看得出一種批評只是得分,另一種則是遞給對手一條乾淨的路,讓他們有機會證明你錯了。