你有多自信过头?

weirdly accurate.

你有多自信过头?

    我是不是太自信了?

    这个过度自信测试用的是经典的九成置信区间任务,看看你说的“九成把握”是不是真能十次中九次。十道数值题,每题拉开一张网,拉到你有九成把握答案就在里面;十张网全部撒完,答案才落下来。研究者用这个任务做了几十年,McKenzie、Liersch和Yaniv在2008年就请135个人每人答了40道题;结果页会告诉你,你的收获和他们比起来怎样。

    这个过度自信测试用的是同一种区间任务。每局十道数值题:年份、大小和距离、数量,从一个收了55道早有定论事实的题库里随机抽,每题都附了核对过的出处。每道题你在数轴上拉开一张网,拉到有九成把握答案就在里面为止。十张网全部撒完才揭晓,免得前一题落空让你悄悄放宽后面的网;然后答案一个个落下来。十个真正九成把握的范围应该网住九个左右,九和你实际网住的数之间的差,就是自信过头的程度。铺满整条数轴的网什么都网得住,所以每张网还用预测区间常用的区间评分另算分,最多10分:网越紧分越高,答案落在网外要扣分,宽到数轴四分之三以上的网不得分。结果还会告诉你:真有九成把握的人只网住这么少的机会有多大,以及你的网要放宽几倍才够。

    命中率测的是校准,不是知识多少,也不是智商:你不需要知道答案,只需要知道自己有多不确定。分数则还奖励懂得够多、网能收得紧。十网是很小的样本,即使是完全校准的人,也有约四分之一的机会只网住8条或更少。题目和研究里的不同,所以和研究的对比只说规律,不做排名。

    这个测试测什么

    只测一件事:你说的“九成把握”,是不是十次里真能中九次。

    怎么测

    • 过度自信研究里的区间任务:每道数值题给一个你有九成把握包含真实答案的范围
    • 每局10题:4道年份,3道大小、距离或温度,3道数量,从55道题的题库里随机抽、随机排
    • 在数轴上按住拖开就是一张网;拖任一浮标或整张平移来调整。拉网时会显示这张网值几分,铺满整片海时网会变灰。浮标也能用键盘操作
    • 十张网撒完前没有任何反馈;收网时答案一个个落下,网住答案的网变成金色

    你会得到什么

    • 满分100的分数:每张网最多10分,网越宽分越少;答案落在网外要扣分,宽到数轴四分之三以上的网记0分,也不算网住
    • 十张网里网住了几条,和真正九成把握应有的结果对照
    • 五档评语:9–10条“你的九成就是九成”,7–8条有点自信过头,4–6条自信过头,3条及以下非常笃定、经常落空;网铺满整片海或宽得远超需要时是“网撒得太保险”
    • 真有九成把握的人只网住这么少的概率,以及每张网要放宽几倍才能十中九
    • 研究里的参照:人们给九成范围时,实际网住了多少(McKenzie等2008,Moore等2015)
    • 逐题渔获记录(每个答案附出处)、只显示总数不露答案的分享卡,和一个邀请朋友来比的链接

    开始之前

    • 大约三分钟
    • 手机、电脑都能玩;电脑上浮标也能用方向键调
    • 声音可有可无,随时可以关掉
    • 免费,不用注册。挑战链接把名字和成绩放在链接里#后面,不会上传

    关于过度自信的常见问题

    这个测试免费吗?要注册才能看结果吗?

    免费,也不用注册:不要账号、不要邮箱、不用付钱。做完最后一题,结果就直接出现在这一页,可以马上分享,也可以再玩一次。

    怎么测自己是不是过度自信?

    给出带把握程度的范围,再数一数有几次真的装下了答案。这就是过度自信研究里的区间任务,这个过度自信测试用的正是它:十道数值题,每题撒一张九成把握的网。如果十张网远远网不住九个答案,说明你的把握跑在了准确度前面。

    过度自信测试怎么计分?

    过度自信测试给两个数。命中率数的是十张网里有几张网住了真实答案,再和真有九成把握的人平均能网住的九张比,并给出只网住这么少的二项分布概率。满分100的分数补上网撒得有多宽:每张网最多10分,网越宽分越少,答案落在网外按距离的20倍扣分,宽到数轴四分之三以上的网记0分。十张网全部撒完前不揭晓任何答案。

    九成把握的题,一般人能对几成?

    十张网都收上来之后,结果页会给出,免得它影响你撒网。它引用Moore、Tenney和Haran在2015年对区间估计研究的综述,以及McKenzie、Liersch和Yaniv在2008年请135个人每人答40道题的研究里报告的命中率。这些研究用的是别的题目,所以只看规律,不做排名。

    过度自信测试的题目从哪来?

    过度自信测试每局从55道早有定论的事实题里随机抽10道:4道年份,3道大小、距离或温度,3道数量。每个答案都核对过列明的出处,结果页的渔获记录会把每个答案和出处一起列出。你不需要知道任何一个答案,测试只问你有多大把握。

    专家会不会没那么自信过头?

    收完十张网,结果页会回答这个问题,依据是McKenzie、Liersch和Yaniv在2008年的研究:135个人,有专家也有新手,每人给40道题各一个九成范围。懂得多能让网收得紧;它能不能让九成范围名副其实,正是那项研究测的。

    网住得少,是不是说明我懂得少?

    命中率不说明这个。命中率测的是校准,也就是你“有把握”的感觉和实际结果对不对得上,而不是你懂多少:一个答案都不知道,老老实实把网撒宽,命中率也能接近十中九。分数则会同时奖励知识,因为懂得越多,网才能收得越紧。十网也是很小的样本:即使完全校准的人,也有约四分之一的机会只网住8条或更少。

    我把每张网都撒得很大不就行了?

    不划算。宽到数轴四分之三以上的网不可能落空,拉网时就会变灰,记0分,也不算网住。比这窄一点的大网也拿不到几分,因为每张网的分数随网宽减少。最划算的,是你真有九成把握的那张网:刚好宽到你愿意按九比一下注。

    数字从哪里来

    怎么计分

    命中率

    十个九成把握的范围里,真正包含答案的比例。完全校准大约是十中九。

    分数(区间评分)

    每张网得10×(1−网宽−20×落在网外的距离),网宽和距离都按数轴的比例算,最低0分。这是给九成区间打分的区间评分(Winkler 1972;Gneiting和Raftery 2007):网宽要花分,落空按距离的2÷10%=20倍扣分,所以为了保险把网拉宽并不划算。

    铺满整片海的网

    宽到数轴四分之三以上的网。每个答案都在数轴的十分之一到十分之九之间,这样的网不可能落空,所以记0分,也不算网住。

    过度精确

    给出的范围比自己说的把握要窄,这是这个任务测的那一种自信过头,Moore、Tenney和Haran(2015)有专门的综述。

    校准对照

    对真有九成把握的人,十网里网住几条服从二项分布:大约每四次里有三次网住9条或10条,约四分之一的机会只有8条或更少。结果会告诉你,光靠运气网住你这么少的机会有多大。

    放宽倍数

    要让十张网里有九张网住,你的每张网得放宽到原来的几倍。