新火種
2024-04-07 
最懂AI的諾獎(jiǎng)經(jīng)濟(jì)學(xué)得主去世，大模型關(guān)鍵技術(shù)受他研究啟發(fā)
一位90歲巨擘的逝世，正在牽動(dòng)整個(gè)科技圈的關(guān)注。
正如YC創(chuàng)始人Paul Graham所說：
關(guān)注大模型技術(shù)的人，應(yīng)該都對(duì)這位以心理學(xué)家身份獲得諾貝爾經(jīng)濟(jì)學(xué)獎(jiǎng)的傳奇人物并不陌生——
他在著作《思考，快與慢》中提出的“人類思維的快慢兩個(gè)系統(tǒng)”，深刻地影響了思維鏈、大模型訓(xùn)練和微調(diào)等關(guān)鍵技術(shù)的發(fā)展。
特斯拉前AI總監(jiān)、OpenAI創(chuàng)始成員Karpathy曾在演講中指出，卡尼曼的雙系統(tǒng)理論，正是思維鏈背后核心利用的原理。
除了AI，卡尼曼對(duì)人類判斷的見解，還影響了經(jīng)濟(jì)學(xué)、金融、醫(yī)學(xué)等廣泛的學(xué)科。
卡尼曼生前工作的普林斯頓大學(xué)校長(zhǎng)評(píng)價(jià)稱：
而他90年的人生，也如同他所提出的的理論一樣，充滿了傳奇。
“人們會(huì)習(xí)慣由機(jī)器做出判斷”
盡管并未直接從事AI研究，卡尼曼的名字卻隨著大模型熱潮在AI領(lǐng)域被反復(fù)提及。
他在暢銷書《思考，快與慢》中，提出了思維的二元性，認(rèn)為人類的認(rèn)知系統(tǒng)包括System1和System2兩個(gè)部分。
System1主要靠直覺，而System2是邏輯分析系統(tǒng)。通俗來說，System1是一個(gè)快速自動(dòng)生成的過程，而System2是經(jīng)過深思熟慮的部分。
這一理論對(duì)之后的大模型的訓(xùn)練和微調(diào)，以及“思維鏈”方式都大有啟發(fā)。
特斯拉前AI總監(jiān)、OpenAI創(chuàng)始成員Andrej Karpathy就在一場(chǎng)演講中指出，要想讓自然語言處理中Transformer的表現(xiàn)更好，需要讓它一步一步地處理信息，而不能直接拋給它一個(gè)非常復(fù)雜的問題。
比如即使是很簡(jiǎn)單的數(shù)學(xué)題，如果要求大模型一步到位地給出答案，也很難得到正確結(jié)果。
UW-Madison的助理教授Kangwook Lee分享了一道題，定義了一種“Q運(yùn)算”，規(guī)則是aQb=a+b-1（未直接在prompt中說明），要求大模型仿照規(guī)律進(jìn)行計(jì)算，結(jié)果GPT4、Claude和Gemini這些最先進(jìn)的大模型無一答對(duì)。
只有讓模型一步步推理，甚至需要不斷地給出引導(dǎo)，才能讓它輸出正確結(jié)果。
像這樣“一步一步”的處理方式是思維鏈的核心，而背后所利用的原理，正是卡尼曼提出的雙系統(tǒng)理論。
除了被廣泛引用，卡尼曼本人從本世紀(jì)第一波AI浪潮開始，就對(duì)人工智能技術(shù)保持著高度關(guān)注。
他曾在2017年的一場(chǎng)演講中公開發(fā)表觀點(diǎn)，認(rèn)為AI終有一天會(huì)代替人們所做的一切事情。
而在ChatGPT問世后，卡尼曼再次對(duì)AI做出了相似的判斷：
因?yàn)樵谒磥恚词故呛?jiǎn)單的變量組合，算法的“噪聲”也肯定要比人類少得多。
所謂“噪聲”，是卡尼曼在Noise: A Flaw in Human Judgment（噪聲：人類判斷力的缺陷）一書中定義的，他將“噪聲”解釋為導(dǎo)致人類針對(duì)相同事件做出不同判斷的原因。
舉個(gè)例子，兩位放射科醫(yī)生對(duì)同一張X光片，可能得出不同的診斷結(jié)果，導(dǎo)致兩人判斷不同的原因，這就是卡尼曼認(rèn)為的“噪聲”。
在后來的一次訪談中，卡尼面將“噪音”的概念進(jìn)一步明確為“判斷錯(cuò)誤中不希望出現(xiàn)的變化”。
但在肯定AI將會(huì)非常有幫助的同時(shí)，卡尼曼也毫不掩飾地表達(dá)了對(duì)AI可能對(duì)人類產(chǎn)生的影響的擔(dān)憂。
在被問及是否擔(dān)心像ChatGPT這樣的AI的發(fā)展會(huì)不受人類限制時(shí)，他毫不猶豫地給出了肯定的答復(fù)：
行為經(jīng)濟(jì)學(xué)的奠基人
獲得了諾貝爾經(jīng)濟(jì)學(xué)獎(jiǎng)的卡尼曼，本不是經(jīng)濟(jì)學(xué)家，而是一名心理學(xué)家，準(zhǔn)確說是首位獲得諾貝爾經(jīng)濟(jì)學(xué)獎(jiǎng)的心理學(xué)家。
獲獎(jiǎng)的理由是，卡尼曼與他的同事兼好友阿莫斯·特沃斯基（Amos Tversky）合作，將認(rèn)知心理學(xué)應(yīng)用到了經(jīng)濟(jì)分析當(dāng)中，為新的研究領(lǐng)域——行為經(jīng)濟(jì)學(xué)奠定了基礎(chǔ)。
頒獎(jiǎng)詞中寫到，“他的工作啟發(fā)了新一代經(jīng)濟(jì)學(xué)和金融學(xué)研究人員，利用認(rèn)知心理學(xué)對(duì)人類內(nèi)在動(dòng)機(jī)的洞察來豐富經(jīng)濟(jì)理論。”
△卡尼曼（左）接受頒獎(jiǎng)，來源：諾貝爾獎(jiǎng)官網(wǎng)
其中涉及了他和特沃斯基提出的前景理論（Prospect Theory，又稱展望理論），從人的心理特質(zhì)、行為特征揭示了影響選擇行為的非理性因素。
通過一系列的實(shí)驗(yàn)觀測(cè)，他們發(fā)現(xiàn)人的決策選擇取決于結(jié)果與預(yù)期的差距，而非結(jié)果本身。
對(duì)于高于預(yù)期的收益型結(jié)果，人們往往表現(xiàn)出風(fēng)險(xiǎn)厭惡，偏好確定的小收益，比如在100%概率獲得1000元和50%概率獲得2000元之間，雖然二者的數(shù)學(xué)期望相同，但更多人傾向于選擇前者。
而對(duì)于低于預(yù)期的損失型結(jié)果，人們反而會(huì)為了避免確定的損失而表現(xiàn)出“風(fēng)險(xiǎn)偏好”，比如在100%損失1000元和51%概率損失2000元之間，盡管后者損失的數(shù)學(xué)期望更大，卻仍然被更多人所選擇。
正是這一理論改變了傳統(tǒng)經(jīng)濟(jì)學(xué)關(guān)于人類行為的假設(shè)，而傳統(tǒng)經(jīng)濟(jì)學(xué)中認(rèn)為人們都是理性的。
卡尼曼的理論更準(zhǔn)確地描述和預(yù)測(cè)人類在各種經(jīng)濟(jì)環(huán)境下的實(shí)際行為，影響了金融市場(chǎng)分析、消費(fèi)者行為研究、公共政策制定等多個(gè)領(lǐng)域。
除了為經(jīng)濟(jì)學(xué)帶來全新的視角，卡尼曼一場(chǎng)名為“經(jīng)驗(yàn)與記憶之謎”的TED演講也吸引了不少人的目光，在全球一共獲得了數(shù)百萬次觀看。
演講中，卡尼曼提出了人類的“兩種自我”——“經(jīng)驗(yàn)自我”和“記憶自我”，經(jīng)驗(yàn)自我活在當(dāng)下，感受和體驗(yàn)每一個(gè)瞬間，而記憶自我則負(fù)責(zé)記錄和講述生活故事。兩者的不同在于處理時(shí)間的方式和對(duì)故事的構(gòu)建。
進(jìn)一步地，卡尼曼在此之上探討了快樂的本質(zhì)和人們對(duì)快樂的不同認(rèn)知方式。他指出，人們對(duì)快樂的理解仍存在一些認(rèn)知上的陷阱，這些陷阱增加了理解快樂本質(zhì)的難度。
對(duì)于快樂而言，經(jīng)驗(yàn)自我記錄了我們生活中具體時(shí)刻的體驗(yàn)，記憶自我則決定了我們對(duì)自己生活的整體滿意度。
卡尼曼指出，經(jīng)驗(yàn)自我和記憶自我之間不可避免地存在沖突，而把握好這兩種自我系，有助于我們更好地認(rèn)識(shí)自己的幸福感，并在追求快樂時(shí)做出更明智的選擇。
以上種種只是卡尼曼諸多理論中的一部分，卻足以體現(xiàn)他對(duì)于人的深刻理解與認(rèn)識(shí)，這或許與他豐富的成長(zhǎng)經(jīng)歷密切相關(guān)。
“人是無限復(fù)雜和有趣的”
卡尼曼1934年出生在現(xiàn)在的以色列特拉維夫，童年時(shí)光則是在法國巴黎度過的。
他與心理學(xué)的結(jié)緣，從這段人生歷程開始就已經(jīng)埋下伏筆：
1940年，納粹德國占領(lǐng)巴黎，卡尼曼一家人當(dāng)時(shí)就生活在那里。
身為猶太人，卡尼曼一家被要求佩戴六芒星標(biāo)志，并且遵守下午6點(diǎn)的宵禁。
有一次，小卡尼曼跟朋友玩得太晚，回家時(shí)街道上已經(jīng)空空蕩蕩。他把毛衣翻過來藏住了星星標(biāo)志，但還是倒霉地遇上了德國黨衛(wèi)軍士兵，并且就在他試圖快點(diǎn)溜走時(shí)，對(duì)方叫住了他。
令小卡尼曼意外的是，這名德國士兵對(duì)他表現(xiàn)得非常親切，不僅擁抱了他，還用德語溫和地跟他說了些話。士兵對(duì)小卡尼曼展示了錢包里一張小男孩的照片，還給了他一些錢。
小卡尼曼至此更加確信了母親對(duì)他的教導(dǎo)：
1948年，卡尼曼和他的家人一起搬回了由英國暫時(shí)管理的巴勒斯坦。此后，十幾歲的卡尼曼表現(xiàn)出了與同齡人的一些不同。
比如，他進(jìn)入的是一所宗教學(xué)校，但在15歲的某一天，走在回家的路上，他突然“福至心靈”：
在后來的訪談中，卡尼曼對(duì)此進(jìn)一步解釋說，在他十幾歲的這個(gè)階段，他發(fā)現(xiàn)相比于“上帝是否存在”，他對(duì)“人們相信上帝的原因”更感興趣。從那時(shí)起，他已經(jīng)決心要投身心理學(xué)研究。
△Midjourney生成
在耶路撒冷希伯來大學(xué)，卡尼曼用兩年的時(shí)間獲得了自己的第一個(gè)學(xué)士學(xué)位，主修心理學(xué)，輔修數(shù)學(xué)。
他對(duì)自己感興趣的事情熱情非常高：曾經(jīng)頂著41℃的高燒去聽神經(jīng)生理學(xué)教授耶沙亞胡·萊博維茲的講座。
畢業(yè)后，他被征召入伍。后于1958年赴美國加州大學(xué)伯克利分校攻讀心理學(xué)博士學(xué)位。
在伯克利，他師從心理語言學(xué)家、女權(quán)主義先驅(qū)Susan Ervin，研究語義差異中形容詞之間的關(guān)系，這使他能夠“從事最喜歡的兩項(xiàng)工作：復(fù)雜相關(guān)結(jié)構(gòu)的分析和FORTRAN編程”。
1961年，卡尼曼進(jìn)入希伯來大學(xué)擔(dān)任心理學(xué)講師，正式開啟學(xué)術(shù)生涯。他和特沃斯基的長(zhǎng)期合作也是在耶路撒冷啟動(dòng)的。
有人用約翰·列儂和保羅·麥卡特尼來類比卡尼曼和特沃斯基的關(guān)系，對(duì)此，卡尼曼本人的評(píng)價(jià)是，“這是一種恭維”。
實(shí)際上，卡尼曼和特沃斯基的性格相差甚遠(yuǎn)：
特沃斯基永遠(yuǎn)是party里最亮的那個(gè)仔，而卡尼曼從學(xué)生時(shí)代就很“社恐”，這種嗨皮的場(chǎng)合更是連去都不去。
特沃斯基的辦公桌上只放一支自動(dòng)鉛筆，而卡尼曼的辦公室堆滿了他沒讀完的書籍和論文。
但卡尼曼說，他倆總是“有共同的想法”。
這種思維方式的共鳴，使他們的私人關(guān)系也非常密切。甚至在文章和著作署名這種事上，他倆都能用拋硬幣來決定。
阿莫斯·特沃斯基在1996年去世，沒有趕上成果獲頒諾貝爾獎(jiǎng)的時(shí)候。
2022年，在一次采訪中，當(dāng)卡尼曼被問到“你每天都會(huì)想他嗎？”
盡管在20世紀(jì)80年代后，兩人的合作已逐漸減少，但卡尼曼的回答是，“是的”。
2018年，卡尼曼的妻子、認(rèn)知心理學(xué)家安妮·特雷斯曼去世。兩年后，他從伯克利搬到了紐約，和特沃斯基的遺孀芭芭拉·特沃斯基住在一起。
One More Thing
說起來，卡尼曼的學(xué)術(shù)成果，或許能解釋一個(gè)許多人疑惑的問題：
為什么迪士尼這樣的地方大排長(zhǎng)隊(duì)，還是有很多人愿意二刷三刷甚至N刷？
因?yàn)椋坝袝r(shí)，記憶中的經(jīng)歷比經(jīng)歷本身更重要”，而記憶中的經(jīng)歷很大程度上是由最高峰時(shí)刻及其結(jié)束決定的。
迪士尼花那么多錢在最后時(shí)刻進(jìn)行煙花表演，可不是白放的。
Tags:
相關(guān)推薦
- 免責(zé)聲明
- 本文所包含的觀點(diǎn)僅代表作者個(gè)人看法，不代表新火種的觀點(diǎn)。在新火種上獲取的所有信息均不應(yīng)被視為投資建議。新火種對(duì)本文可能提及或鏈接的任何項(xiàng)目不表示認(rèn)可。 交易和投資涉及高風(fēng)險(xiǎn)，讀者在采取與本文內(nèi)容相關(guān)的任何行動(dòng)之前，請(qǐng)務(wù)必進(jìn)行充分的盡職調(diào)查。最終的決策應(yīng)該基于您自己的獨(dú)立判斷。新火種不對(duì)因依賴本文觀點(diǎn)而產(chǎn)生的任何金錢損失負(fù)任何責(zé)任。
