我是不是太有自信了?
這個過度自信測驗用的是經典的九成信賴區間任務,看看你說的「九成把握」是不是真能十次中九次。十道數值題,每題拉開一張網,拉到你有九成把握答案就在裡面;十張網全部撒完,答案才會落下來。研究者用這個任務做了幾十年,McKenzie、Liersch和Yaniv在2008年就請135個人每人回答了40道題;結果頁會告訴你,你的收穫和他們比起來如何。
實際玩法是這樣:每局十道數值題,包括年份、大小和距離、數量,從一個收錄55道早有定論事實的題庫裡隨機抽出,每題都附上核對過的出處。每道題你在數軸上拉開一張網,拉到有九成把握答案就在裡面為止。十張網全部撒完才揭曉,免得前一題落空讓你悄悄放寬後面的網;接著答案一個個落下。十個真正有九成把握的範圍應該網住九個左右,九和你實際網住的數量之間的差距,就是自信過頭的程度。鋪滿整條數軸的網什麼都網得住,所以每張網還會用預測區間常用的區間評分另外計分,最多10分:網越緊分數越高,答案落在網外要扣分,寬到數軸四分之三以上的網不得分。結果也會告訴你:真有九成把握的人只網住這麼少的機會有多大,以及你的網要放寬幾倍才夠。
命中率測的是校準,不是知識多寡,也不是智商:你不需要知道答案,只需要知道自己有多不確定。分數則還會獎勵懂得夠多、能把網收緊的人。十張網是很小的樣本,即使是完全校準的人,也有約四分之一的機會只網住8條或更少。題目和研究裡用的不同,所以和研究的對照只看規律,不做排名。
這個測驗測什麼
只測一件事:你說的「九成把握」,是不是十次裡真能中九次。
怎麼測
- 過度精確研究裡的區間任務:每道數值題給一個你有九成把握包含真實答案的範圍
- 每局10題:4道年份,3道大小、距離或溫度,3道數量,從55道題的題庫裡隨機抽出、隨機排序
- 在數軸上按住拖開就是一張網;拖動任一浮標或整張平移來調整。拉網時會顯示這張網值幾分,蓋滿整片海時網會變灰。浮標也能用鍵盤操作
- 十張網撒完之前沒有任何回饋;收網時答案一個個落下,網住答案的網會變成金色
你會得到什麼
- 滿分100的分數:每張網最多10分,網越寬分數越少;答案落在網外要扣分,寬到數軸四分之三以上的網記0分,也不算網住
- 十張網裡網住了幾條,和真正九成把握應有的結果對照
- 五級評語:9–10條「你的九成就是九成」,7–8條有點自信過頭,4–6條自信過頭,3條以下非常篤定、經常落空;網蓋滿整片海或寬得遠超過需要時,則是「網撒得太保險」
- 真有九成把握的人只網住這麼少的機率,以及每張網要放寬幾倍才能十中九
- 研究裡的參照:人們給出九成範圍時,研究發現了什麼(McKenzie等2008,Moore等2015)
- 逐題漁獲紀錄(每個答案附出處)、只顯示總分不露答案的分享卡,以及一個邀朋友來比的連結
開始之前
- 大約三分鐘
- 手機、電腦都能玩;在電腦上,浮標也能用方向鍵調整
- 聲音可有可無,隨時可以關掉
- 免費,不用註冊。挑戰連結把名字和成績放在網址#後面,不會上傳
關於過度自信的常見問題
這個測驗免費嗎?要註冊才能看結果嗎?
免費,也不用註冊:不要帳號、不要信箱、不用付錢。做完最後一題,結果就直接出現在這一頁,可以馬上分享,也可以再玩一次。
怎麼測自己是不是過度自信?
給出帶有把握程度的範圍,再數一數有幾次真的裝下了答案。這就是過度自信研究裡的區間任務,這個過度自信測驗用的正是它:十道數值題,每題撒一張九成把握的網。如果十張網遠遠網不到九個答案,就表示你的把握跑在準確度前面了。
過度自信測驗怎麼計分?
過度自信測驗給兩個數字。命中率數的是十張網裡有幾張網住了真實答案,再和真有九成把握的人平均能網住的九張相比,並附上只網住這麼少的二項分布機率。滿分100的分數則把網撒得多寬也算進來:每張網最多10分,網越寬分數越少,答案落在網外按距離的20倍扣分,寬到數軸四分之三以上的網記0分。十張網全部撒完之前,不會揭曉任何答案。
九成把握的題目,一般人能對幾成?
十張網都收上來之後,結果頁會告訴你,免得它影響你撒網。它引用Moore、Tenney和Haran在2015年對區間估計研究的綜述,以及McKenzie、Liersch和Yaniv在2008年請135個人每人回答40道題的研究中所報告的命中率。這些研究用的是別的題目,所以只看規律,不做排名。
過度自信測驗的題目從哪裡來?
過度自信測驗每局從55道早有定論的事實題裡隨機抽出10道:4道年份,3道大小、距離或溫度,3道數量。每個答案都核對過列明的出處,結果頁的漁獲紀錄會把每個答案和出處一起列出。你不需要知道任何一個答案,測驗只問你有多大把握。
專家會不會比較不會自信過頭?
收完十張網,結果頁會回答這個問題,依據是McKenzie、Liersch和Yaniv在2008年的研究:135個人,有專家也有新手,每人替40道題各給一個九成範圍。懂得多能讓網收得緊;它能不能讓九成範圍名副其實,正是那項研究要測的。
網住得少,是不是代表我懂得少?
命中率不代表這個。命中率測的是校準,也就是你「有把握」的感覺和實際結果對不對得上,而不是你懂多少:一個答案都不知道,老老實實把網撒寬,命中率也能接近十中九。分數則會同時獎勵知識,因為懂得越多,網才能收得越緊。十張網也是很小的樣本:即使完全校準的人,也有約四分之一的機會只網住8條或更少。
我把每張網都撒得很大不就好了?
不划算。寬到數軸四分之三以上的網不可能落空,拉網時就會變灰,記0分,也不算網住。比這窄一點的大網也拿不到幾分,因為每張網的分數會隨網寬減少。最划算的,是你真有九成把握的那張網:剛好寬到你願意用九比一下注。
數字從哪裡來
你的命中數用二項分布和真正的九成對照,也和這些研究報告的命中率對照;分數用的是Winkler以及Gneiting與Raftery的區間評分。這裡的題目和研究不同,所以沒有百分位數。題庫裡每個答案都在漁獲紀錄裡附有自己的出處。本站不公開自己玩家的資料。
- McKenzie, Liersch & Yaniv(2008),Organizational Behavior and Human Decision Processes — Overconfidence in interval estimates: What does expertise buy you?(區間估計中的過度自信與專業知識的作用)
- Moore, Tenney & Haran(2015),The Wiley Blackwell Handbook of Judgment and Decision Making — Overprecision in judgment(判斷中的過度精確綜述)
- Winkler(1972),Journal of the American Statistical Association — A decision-theoretic approach to interval estimation(區間評分的起點)
- Gneiting & Raftery(2007),Journal of the American Statistical Association — Strictly proper scoring rules, prediction, and estimation(評估預測的評分規則)
- Soll & Klayman(2004),Journal of Experimental Psychology: Learning, Memory, and Cognition — Overconfidence in interval estimates(區間估計中的過度自信)
怎麼計分
命中率
十個九成把握的範圍裡,真正包含答案的比例。完全校準大約是十中九。
分數(區間評分)
每張網得10×(1−網寬−20×落在網外的距離)分,網寬和距離都按數軸的比例計算,最低0分。這是替九成區間打分的區間評分(Winkler 1972;Gneiting與Raftery 2007):網寬要付出代價,落空則按距離的2÷10%=20倍扣分,所以為了保險把網拉寬並不划算。
蓋滿整片海的網
寬到數軸四分之三以上的網。每個答案都落在數軸的十分之一到十分之九之間,這樣的網不可能落空,所以記0分,也不算網住。
過度精確
給出的範圍比自己說的把握所允許的還要窄,這正是這個任務測的那一種自信過頭,Moore、Tenney和Haran(2015)有專門的綜述。
校準對照
對真有九成把握的人來說,十張網裡網住幾條服從二項分布:大約每四次有三次網住9條或10條,約四分之一的機會只有8條或更少。結果會告訴你,光靠運氣網住你這麼少的機會有多大。
放寬倍數
要讓十張網裡有九張網住,你的每張網得放寬到原來的幾倍。