關於
Stephen Wolfram 是物理學家、數學家,也是 Mathematica、Wolfram|Alpha 與 Wolfram Language 的創造者。他的著作《一種新科學》(A New Kind of Science) 提出簡單的計算規則能夠產生複雜現象的主張。他是探討 LLM 運作原理的重要聲音,發表了大量深入分析 ChatGPT 內部機制的文章,並探索計算本身是否構成智慧與現實的基礎。
主要貢獻
- 創造 Mathematica 與 Wolfram Language,使符號計算與計算筆記本成為主流工具
- 打造 Wolfram|Alpha 計算知識引擎,透過對整理資料進行計算來回答查詢
- 在 cellular automata 與複雜系統研究上有所推進,後來擴展成《A New Kind of Science》的整體計畫
- 著有《A New Kind of Science》,主張簡單程式能在自然與數學中生成複雜性
- 普及 computational irreducibility,為預測、解釋與 AI 期待提供有用的限制概念
- 其 ChatGPT 文章讓許多讀者理解 LLM 機制,但更廣泛的計算世界觀有時也顯得過於包山包海
影片與訪談
Stephen Wolfram: ChatGPT and the Nature of Truth, Reality & Computation
Lex Fridman Podcast #376 - How LLMs work, computational irreducibility, and the nature of intelligence
View Details
What Is ChatGPT Doing...and Why Does It Work?
Stephen Wolfram's deep technical explanation of how large language models function
View Details思想連結
Lex Fridman
曾經對談Research Scientist, MIT; Host of the Lex Fridman Podcast
這是 Wolfram 第四度上節目,錄於他把 Wolfram Language 接上 ChatGPT 的幾週後;他為這組搭配下了精準的定位:語言模型寬而淺,計算則是深的。最值得一聽的,是話題轉向內在生命的那一段。Fridman 說他傾向相信大型語言模型會擁有經驗;當 Wolfram 反駁說,模型說自己害怕,不過是從網路上學來的字眼,Fridman 把問題丟了回去——「那你又是從哪裡學來的,Stephen?」——並說他是「你那個生物神經網路裡的一個大型語言模型」。結尾,Fridman 感謝 Wolfram 寫了《A New Kind of Science》,那本書啟發了「我心裡的那個小孩」去追求 AI。
youtube.com
David Deutsch
思想對照物理學家與量子計算先驅
被問到宇宙是否可能以沃夫勒姆那種方式跑在一台細胞自動機上,Deutsch 的回答是:宇宙確實是計算性的,「但方向和那個理論說的正好相反」。在他看來,令人驚異的是物理定律允許通用電腦在宇宙「之內」被造出來,於是一個部分能模擬整體。若把電腦挪到宇宙之外,這份洞見就垮了:沒有任何理由說外面那台機器是圖靈機,這種回溯什麼也沒解釋,還毀掉我們已有的、關於計算與物理之關係的說明。兩種計算宇宙論都同意宇宙在計算,卻在「機器站在哪裡」上完全分道。
youtube.com