重點摘要
普通人在預測世界事件上擊敗了CIA分析師
遠見是一種可訓練的技能,而非天賦。在一場由IARPA(情報界的研究機構)資助的預測錦標賽中,乃特洛克招募了數千名志願者來預測地緣政治事件。一位名叫乃格·洛奇的退休電腦程式設計師,以及一位名叫比爾·弗拉克的前農業部員工,據報導以約30%的優勢擊敗了擁有機密情報的專業分析師。他的團隊「良好判斷計畫」在第一年就以60%的優勢擊敗了官方對照組。
排名前2%的預測者,被乃特洛克稱為「超級預測者」,他們並非擁有秘密資料的天才。他們只是好奇的業餘人士,坐在自家廚房餐桌前預測全球事務,獎勵不過是一張250美元的禮品券。讓他們出類拔萃的不是他們的身分,而是他們的做法:不懈的研究、自我批判,以及持續更新信念。
令人驚訝的是,這完全顛覆了媒體和政府中根深蒂固的專家崇拜。這一發現呼應了詹姆斯·乃洛維基的群眾智慧研究,以及保羅·米爾1954年證明簡單演算法勝過臨床判斷的成果。然而乃特洛克增添了細微差異:聚合只有在判斷真正獨立且多元時才有效。懷疑論者可能會指出選擇偏差,因為這些志願者是自我篩選出的、異常積極的新聞愛好者。更深層的教訓與安德斯·艾瑞克森的刻意練習研究相呼應:在一個定義明確、有清晰回饋的領域中,頂尖表現是培養出來的,而非與生俱來。悲劇在於,大多數預測領域從未產生能讓任何人進步的回饋。
大多數名嘴的預測能力不比擲飛鏢的黑猩猩好
自信能賣錢;準確度卻鮮少被衡量。乃特洛克長達二十年的研究(1984年至2004年)從284位專家那裡收集了大約28,000個預測。平均而言,專家的表現與隨機猜測差不多,而在三到五年的時間範圍內,準確度更是趨近於純粹的機率。那句著名的結論——專家的表現堪比擲飛鏢的黑猩猩——被廣泛誤引為「所有專業知識都毫無用處」。乃特洛克拒絕這種虛無主義。
問題出在需求端的失靈。預測的消費者(政府、企業、選民)從不要求查看預測紀錄。像虛構版湯馬斯·乃里曼這樣的名嘴,被聘用是因為他們善於講述引人入勝的故事,而非因為經過驗證的準確度。過去的預測像昨日新聞一樣消失無蹤,沒有人去核對當初說了什麼與實際發生了什麼。棒球教練會參考打擊率,但我們卻把生命和數兆美元的賭注押在準確度完全未經檢驗的預測者身上。
黑猩猩那句話成了反智民粹主義的擋箭牌,這顯然讓乃特洛克感到惱火。他真正的靶子不是專業知識,而是不可問責性。這與心理學的再現危機以及循證醫學緩慢戰勝權威的過程相呼應。一個有用的延伸:預測市場和Metaculus等平台現在確實在系統性地為預測者評分,逐步建立乃特洛克所期望的問責基礎設施。值得提出的一個挑戰是,名嘴所扮演的功能可能超越預測本身,包括議題設定和框架建構。乃特洛克承認這一點,但堅持認為政策倡議中暗含著隱性預測,這是合理的。如果你主張某項政策會奏效,你就已經做出了一個可檢驗的聲明,無論你是否承認。
現實既是時鐘也是雲朵,因此要校準你的企圖心
可預測性取決於預測什麼、預測多遠,以及在什麼條件下。乃特洛克借用了兩個隱喻。拉普拉斯式時鐘代表完美的決定論——只要知道所有當前條件,就能精確預測未來。洛倫茲式雲朵代表混沌系統,其中微小的誤差會爆炸性放大,就像愛德華·洛倫茲的蝴蝶,一次振翅就可能改變遠方的龍捲風。天氣預報在兩天內是可靠的,超過一週就毫無用處。
現實世界混雜了兩者。潮汐、日食和日出是時鐘式的,可以預測數十年。2010年阿拉伯之春由一位突尼西亞水果攤販的自焚所引發,則是雲朵式的,無法預見。技巧在於分類篩選:辨別哪些問題處於「恰到好處」的區間——在那裡努力確實有回報——並放棄那些真正無法穿透的問題,而不是自欺欺人。
時鐘與雲朵的區分是一個生動的教學工具,儘管哲學家卡爾·波普爾最先提出了這個概念。其實用價值在於:預測的時間範圍極為重要,而謙遜應隨之調整。這與納西姆·塔雷伯的肥尾分布以及更廣泛的複雜性科學相關聯。現代讀者可能會補充,機器學習已經將某些雲朵式的前沿稍微向外推進(天氣模型持續改善),但隨著混沌重新佔據主導,回報趨近於零。真正可操作的洞見是分類篩選:把精力花在十二年後的選舉預測上是浪費,而三到十八個月的問題則會回報勤奮者。知道其中的差別本身就是良好判斷力的標誌。
不要相信那些感覺顯而易見、毫不費力的直覺答案
你的快速大腦會從薄弱的證據中跳到結論。乃特洛克借鑑了丹尼爾·康納曼的雙系統模型。系統一是自動且即時的;系統二是緩慢且費力的。問大多數人:一支球棒和一顆球總共1.10美元,球棒比球貴1美元,那球多少錢?他們會脫口而出十美分。這是錯的(答案是五美分)。系統一給出了一個自信的、未經檢驗的答案。
乃特洛克將這種預設反應稱為「鼻尖視角」。它把眼前可見的一切當作全部真相,這種偏誤被康納曼稱為WYSIATI(你所看到的就是全部)。2011年挪威奧斯陸爆炸案發生時,評論員立即將矛頭指向伊斯蘭恐怖分子;但兇手是一名挪威右翼極端分子。那個看似合理的故事感覺是真的,於是審視就此停止。
這是康納曼和特沃斯基的理論為預測者重新包裝,乃特洛克對此毫不諱言。他的新貢獻在於展示超級預測者並非擁有更優越的直覺,而是擁有更優越的紀律來質疑直覺。注意這與蓋瑞·乃萊因的專家直覺研究之間的張力——消防員和護士能快速讀取有效線索。康納曼和乃萊因對此做了調和:直覺只有在具有穩定規律性和快速回饋的領域(如棋類、消防)中才值得信賴,在政治或市場等線索嘈雜的領域則不然。奧斯陸的例子清楚地說明了確認偏誤加上可得性偏誤。矯正方法是問自己「什麼能說服我是錯的」——這是科學家反射性地會問的問題,而名嘴幾乎從不這樣做。
博學多聞的狐狸碾壓只有一個大理論的刺蝟
你怎麼思考比你知道什麼更重要。以賽亞·柏林的寓言將思想家分為刺蝟——透過一個宏大理論過濾一切——和狐狸——從多種來源收集碎片並將它們拼湊在一起。乃特洛克發現,狐狸在校準度和大膽度上都決定性地勝過刺蝟。
刺蝟戴著綠色眼鏡。就像被迫將翡翠城看成綠色的訪客一樣,意識形態者到處看到確認。賴瑞·乃德洛信奉供給面經濟學,在2008年大衰退吞噬一切時仍堅持經濟正在蓬勃發展。更多的資訊只是膨脹了他的信心,而非他的準確度。矛盾的是,刺蝟更適合上電視:他們緊湊、確定的故事能抓住觀眾。乃特洛克發現名氣與準確度之間存在反向相關。專家越有名,預測越差。
狐狸與刺蝟的框架是乃特洛克的標誌性貢獻,而且經得起時間考驗。名氣與準確度的反向相關值得強調,因為它解釋了一個結構性病態:媒體的激勵機制恰恰選擇了那些會降低預測品質的特質。這與菲利普·康弗斯關於信念體系的研究以及專家過度自信的研究相呼應。乃特洛克自己提出的一個警告是,狐狸和刺蝟構成一個光譜而非二元對立,人們會根據情境轉換風格。值得補充的是:刺蝟式思維有時能產生挑釁性的問題,而狐狸隨後能很好地回答這些問題。像乃里曼這樣的大理論思想家即使預測失敗,也能點出什麼是重要的。理想狀態是共生,而非消滅其中一種類型。
將不可能的問題拆解為可回答的部分——費米式方法
分解問題,將可知的與猜測的分開。物理學家恩里科·費米訓練學生在沒有數據的情況下估算看似無法回答的問題,例如芝加哥有多少鋼琴調音師。訣竅是將問題拆解為子問題:有多少架鋼琴、多久調一次音、調音需要多長時間、調音師每天工作幾小時。每一步的粗略估計組合起來,最終得出驚人準確的估算(大約63人,接近實際數字)。
超級預測者將費米方法應用於地緣政治。面對阿拉法特遺體開棺後是否會發現釙的問題,比爾·弗拉克並沒有從中東政治入手。他問的是:什麼條件必須成立?多年後釙還能被檢測到嗎?有多少途徑可能導致遺體受到污染?分解問題將隱藏的假設拖到了陽光下。
費米估算是物理學教學和科技業面試的標準方法,但將其應用於政治預測是乃特洛克的巧妙移植。更深層的認知價值在於,分解問題能擊敗屬性替代——大腦用一個簡單問題替換困難問題的習慣。通過強制進行明確的子估算,你能暴露出不確定性真正存在的位置。這與決策分析技術(如故障樹)以及道格拉斯·哈伯德關於衡量看似不可衡量之事的研究相呼應。一個局限是:如果子估算之間存在相關性或系統性偏差,分解可能會傳播誤差,而虛假的精確度可能偽裝成嚴謹。儘管如此,敢於在記錄上犯錯的紀律,仍然勝過黑箱直覺帶來的虛假安慰。
先錨定基準率,再深入誘人的具體細節
先從外部視角出發,再轉向內部視角。康納曼區分了外部視角(在一個廣泛類別中,類似事件發生的頻率)和內部視角(這個案例的生動具體細節)。超級預測者首先參考外部視角,因為錨定效應的存在:無論我們從什麼數字開始,最終估計都會被拉向它,而且我們調整不足。從一個有意義的基準率開始,就能產生一個有意義的錨點。
舉例來說:倫澤蒂家有養寵物嗎?業餘者會從這個家庭的義大利姓氏和獨生子女編織故事。超級預測者則先了解到大約62%的美國家庭養寵物,然後再進行調整。當比爾·弗拉克評估中越衝突風險時,他先估算歷史上此類衝突發生的頻率(比如每五年一次,即年發生率20%),然後根據當前情況進行微調。內部視角是用來精煉的,不應該主導判斷。
這是書中最具可移植性的工具之一。規劃謬誤就是忽視它的日常代價:人們從內部視角估算專案時程,結果長期延誤。據說賴瑞·薩默斯會將員工的時間估算加倍,再把單位往上調一級——這個笑話同時也是合理的基準率修正。外部視角對抗的是敘事的誘人連貫性。一個細微之處是:基準率需要選擇一個參考類別,而參考類別的選擇本身就是一個判斷,可以被操弄。兩個預測者可以選擇不同的類別,得出不同的錨點。藝術在於找到真正與你的案例相似的類別,然後誠實地更新。
用精細的機率取代「是」、「否」和「也許」
大多數人的心理刻度盤只有三個檔位。正如阿莫斯·特沃斯基所打趣的,人類預設只有三種模式:會發生、不會發生、也許。這在石器時代的生存中足夠用了——區分潛伏獅子60%和80%的機率毫無意義。但這會毀掉現代預測。超級預測者以精細的百分比思考,有時會爭論一個機率是5%還是1%。
精細度能預測準確度。芭芭拉·梅勒斯的研究顯示,使用個位數百分比(例如21%對22%)的預測者勝過四捨五入到五的整數的人,後者又勝過只用十的整數的人。當她人為地將超級預測者的估計值稍微四捨五入時,他們的分數就下降了,而普通預測者幾乎沒有損失。超級預測者也拒絕宿命論。在一個衡量「事件注定發生」信念的九分量表上,他們得分最低,而且思維越具機率性的人,預測越準確。
有意義的精確度可以低於一個百分點的說法讓許多人覺得荒謬,但錦標賽的數據支持這一點。這與乃爾曼·肯特為情報評估附加數字的努力相呼應——當分析師意識到「嚴重可能性」之類的模糊措辭能保護他們免受責備時,這一努力便告失敗。「也許的錯誤面」謬誤(因為事件沒有發生就判定70%的預測是錯的)是一個真正的文化障礙,懲罰了誠實的機率思考者。值得注意的是乃特洛克在其他地方提出的權衡:精細度只有在區分是真實的情況下才是美德,而非用小數點裝飾的故弄玄虛。拒絕宿命論與準確度相關的發現頗具挑釁性且略令人不安,暗示心理上的安慰感與預測技能可能朝相反方向拉扯。
頻繁更新你的信念,但每次只做小幅調整
在兩塊礁石之間航行。乃特洛克將信念更新比喻為在斯庫拉(反應不足,死守信念)和卡律布狄斯(反應過度,隨每條新聞搖擺)之間航行。反應不足源於信念固著和自我意識。1942年對112,000名日裔美國人的拘禁之所以持續,是因為像厄爾·華倫這樣的官員投入了太多身分認同,無法承認威脅是虛構的;德威特將軍甚至聲稱沒有破壞活動恰恰證明破壞活動即將到來。
小幅更新能同時從舊資訊和新資訊中擷取價值。超級預測者提姆·明托贏得第三季比賽,部分原因是他對一個敘利亞難民預測進行了34次修改,每次平均只調整3.5%。這在精神上就是貝葉斯更新:你的新信念等於先驗信念乘以新證據的診斷價值的加權。超級預測者很少真正計算貝葉斯公式,但他們活出了它的邏輯——從60%微調到64%,而非大幅跳躍。
斯庫拉與卡律布狄斯的框架捕捉了一個真實的最佳化問題,這在信號處理和卡爾曼濾波中也有研究——在那裡你持續將先驗估計與嘈雜的測量值混合。信念固著與利昂·費斯廷格的認知失調以及丹·卡漢的身分保護性認知相關聯——當信念錨定在自我概念附近時,它們會抵抗所有證據。乃特洛克的積木塔隱喻(信念層層堆疊,一塊基礎積木倒下就全部崩塌)是一個有用的心智模型。反直覺的禮物是:超級預測者的業餘身分反而是一種優勢——由於沒有太多自我押注在任何預測上,他們能自由更新。這暗示組織可能受益於將做預測的人與聲譽繫於正確與否的人分開。
成長心態和毅力的重要性是純智商的三倍
永遠的測試版是成功最強的預測因子。借用軟體術語——指從未發布最終版本而是不斷改進的軟體——乃特洛克發現,對自我提升的承諾在預測一個人能否成為超級預測者方面,其預測力大約是智力的三倍。超級預測大約是75%的汗水加25%的靈感。
技能需要「嘗試、失敗、分析、調整」的循環加上回饋。凱因斯是一位出色的投資者,曾兩度被清盤,但他通過無情地審視自己的錯誤而東山再起,體現了他那句據傳的名言——當事實改變時就改變想法(乃特洛克實際上無法找到這句話的出處)。但僅有經驗而沒有清晰、及時的回饋,什麼也學不到。警察在識別謊言方面變得越來越自信,但並沒有越來越準確,因為回饋是延遲且模糊的。氣象學家和橋牌選手則保持良好的校準度,因為結果來得快速且明確。否則,後見之明偏誤會悄悄地腐蝕記憶。
毅力優先於智力的觀點呼應了安乃拉·達克沃斯(乃特洛克的同事)和乃羅爾·乃維克的心態研究,兩者在此都有引用。更微妙也更原創的觀點是關於回饋架構:沒有評分系統來照亮一切,才能就會衰退。這就是為什麼預測在大多數機構中停滯不前,而橋牌和天氣預報則不會。後見之明偏誤——由巴魯克·費斯科霍夫所記錄——是無聲的殺手,它追溯性地編輯記憶,讓我們相信自己早就知道,因此什麼也沒學到。一個實用的啟示:保持一本有日期、明確記錄的預測日誌,是現有最便宜的干預措施。心態勝過智商三倍的說法應被理解為特定領域的結論,前提是超過基本的數學素養和好奇心門檻。
最好的團隊以尊重的態度爭論,慷慨地分享
群體可以是智慧的,也可以是瘋狂的。甘迺迪的同一批顧問在1961年因團體迷思(乃爾文·詹尼斯的術語,指凝聚力強的群體為維護和諧而壓制異議)搞砸了豬灣事件,然後在1962年古巴飛彈危機中避免了核戰爭——因為甘迺迪制度化了懷疑精神、魔鬼代言人角色,甚至離開房間讓辯論自由進行。
超級團隊的表現超越了一切。將超級預測者組成團隊使他們的準確度提高了約50%。普通預測者的團隊以10%的優勢擊敗了群眾智慧,而超級團隊以15%到30%的優勢擊敗了預測市場。秘訣在於精確提問、建設性對抗和分享的文化。亞當·格蘭特關於給予者(貢獻多於索取的人)的研究在此適用:像乃格·洛奇和提姆·明托這樣的超級預測者分享程式工具和分析,他們的團隊因此獲勝。一個群體的開放心態是一種湧現特性,而非僅僅是成員特質的總和。
業餘超級團隊擊敗流動性預測市場的反直覺結果挑戰了強式效率市場假說,儘管乃特洛克公正地承認所測試的市場缺乏真實資金和深度。集體智慧是湧現的而非加法的這一發現,與安妮塔·伍利和克里斯多福·查布里斯的研究一致——該研究顯示群體智商更多取決於溝通模式和社會敏感度,而非個別成員的智商。格蘭特的給予者研究增添了道德經濟的維度:在重複互動中,慷慨在策略上是理性的。乃特洛克提出的實際警告是真實的:你不能在一家真正的公司裡簡單地冊封明星並把他們泡在團隊中,而不引發怨恨和混亂。根據史考特·乃吉的研究,觀點的多樣性可能與原始能力同等重要。
偉大的領導者將堅定的決心與知識上的謙遜結合
下達任務意圖,而非微觀管理。乃特洛克通過普魯士的「任務式指揮」(Auftragstaktik)學說解決了懷疑驅動的預測與果斷領導之間的表面衝突。這一學說由毛奇和德意志國防軍完善,後來被艾森豪、巴頓以及亞馬遜和3M等現代企業所採用。領導者陳述目標,但將「如何做」留給前線人員,讓他們隨著現實變化即興應對。沒有計畫能在與敵人接觸後倖存。
知識上的謙遜不是自我懷疑。撲克冠軍乃妮·乃克區分了對遊戲的謙遜(遊戲極其複雜,永遠無法精通)和對對手的信心。索羅斯、凱因斯和乃乃烏斯都極度自信,但同時認識到現實驚人的複雜性和自身的可錯性。乃特洛克刻意使用德意志國防軍——一個邪惡的組織——來迫使讀者進行最艱難的換位思考:承認我們所鄙視之物的能力,以免致命地低估對手。
這個綜合論述很優雅:對世界保持謙遜,同時對自己的行動能力保持信心。這對應了認識論謙遜與癱瘓之間的區別。任務式指揮在敏捷管理和史丹利·麥克乃里斯托的《團隊中的團隊》中已成為時尚,與韌性系統中分散式決策的類比也很強。乃特洛克選擇德意志國防軍是挑釁性的,但在教學上很精準:費茲傑羅關於同時持有兩個對立想法的名言捕捉了所需的認知動作。最有力的論點是:道德上的厭惡永遠不應扭曲對能力的事實評估——這是情報分析師迫切需要的紀律。值得指出的風險是,欣賞一個邪惡機構的效率,如果讀者忘記了它為何應被摧毀,可能會滑向道德麻木。
深度分析
《超級預測》是一本偽裝成自助手冊的科學書籍,而嚴謹性是它的顯著特徵。大多數預測建議只提供格言警句,乃特洛克則提供了一場錦標賽:數十萬個有日期、有評分、可證偽的預測,由IARPA裁定。這個方法論骨架讓他能夠提出一個少有名嘴能經受住的實證主張——預測技能是真實的、可衡量的、可教授的,而且一群自我篩選的業餘人士能夠勝過擁有機密情報的專業分析師。這本書的知識譜系清晰可見:康納曼和特沃斯基的捷思法、米爾的精算優越性、柏林的狐狸與刺蝟、費斯科霍夫的後見之明偏誤。乃特洛克的原創性不在於發明概念,而在於將它們操作化為一種認知風格的肖像,然後證明這種風格能贏。
這本書最深層的張力在於準確性與意義之間。超級預測者拒絕宿命、容忍模糊、將信念視為可拋棄的假設。乃特洛克坦率地指出,尋找意義與幸福感正相關,但與遠見負相關,這提出了一個未解的問題:機率性的清晰思維是否有心理代價?他迴避了這個問題,但它縈繞著整個計畫。一個相關的局限——乃特洛克通過與納西姆·塔雷伯的論辯誠實地面對了這一點——是錦標賽衡量的是短期問題(數月而非數十年),無法涵蓋那些可以說最深刻塑造歷史的黑天鵝事件。他的反駁——大事件可以分解為可預測的小事件——很巧妙,但並不完全令人信服。
讓這本書脫穎而出的是它拒絕虛假的二分法:時鐘對雲朵、直覺對分析、人類對機器、領導力對懷疑。乃特洛克反覆堅持答案是經過校準的融合。這在知識上是誠實的,但對於想要明確規則的讀者來說偶爾令人沮喪。他對公共生活的真正貢獻是呼籲一場以證據為基礎的預測革命,效仿循證醫學——記錄分數、要求追蹤紀錄、通過迫使對手做出精確且可檢驗的賭注來去極化辯論。如果這一規範被廣泛採用,它對話語品質的改善將超過書中任何單一技巧。
評論摘要
《超級預測》因其對預測與預報的深刻分析而獲得高度讚譽。讀者們讚賞泰特洛克對「超級預測者」——那些持續表現優於專家的人——所進行的嚴謹研究。本書探討了認知偏誤、決策過程,以及開放心態在預測中的重要性。許多人認為這本書發人深省、文筆流暢,並將其與康納曼和塔雷伯的著作相提並論。雖然有些人批評書中內容有所重複或過於聚焦政治議題,但大多數人認為這是一本在充滿不確定性的世界中理解預測與批判性思維的寶貴讀物。
其他人也在讀
下載 PDF
下載 EPUB
.epub digital book format is ideal for reading ebooks on phones, tablets, and e-readers.