Ho un eccesso di fiducia?
Questo test sull’eccesso di fiducia usa il classico compito degli intervalli di confidenza al 90% per scoprire se il tuo «sicuro al 90%» si avvera davvero nove volte su dieci. Per dieci domande numeriche allarghi una rete finché sei sicuro al 90% che la risposta ci sia dentro, e le risposte cadono solo quando tutte e dieci le reti sono in acqua. I ricercatori usano questo compito da decenni: nel 2008 McKenzie, Liersch e Yaniv, per esempio, hanno dato 40 domande a ciascuna di 135 persone. La scheda dei risultati mostra come si colloca la tua pesca rispetto a quegli studi.
In pratica ricevi dieci domande numeriche — date, dimensioni e distanze, quantità — estratte a caso da un archivio di 55 fatti assodati da tempo, ognuno verificato su una fonte indicata. Per ciascuna trascini una rete lungo una linea finché sei sicuro al 90% che la risposta ci sia dentro. Non viene rivelato nulla finché non hai gettato tutte e dieci le reti, così un errore non ti insegna ad allargare la successiva; poi cadono le risposte. Dieci veri intervalli al 90% dovrebbero prenderne circa nove, e la distanza tra nove e la tua pesca è il tuo eccesso di fiducia. Poiché una rete su tutta la linea prenderebbe tutto, ogni rete vale anche fino a 10 punti secondo il punteggio degli intervalli usato per gli intervalli di previsione: le reti più strette valgono di più, un pesce fuori costa punti e una rete di tre quarti della linea o più non vale niente. Il risultato mostra anche quanto sarebbe probabile una pesca piccola come la tua per chi è davvero sicuro al 90%, e quanto più larghe avrebbero dovuto essere le tue reti.
Il tasso di successo misura la calibrazione, non le conoscenze né l’intelligenza: non devi sapere nessuna risposta, solo quanto sei incerto. I punti premiano anche il sapere abbastanza da tenere le reti strette. Dieci reti sono un campione piccolo: anche una persona perfettamente calibrata ne prende 8 o meno circa una volta su quattro. Le domande non sono quelle degli studi, quindi il confronto con loro mostra una tendenza, non una classifica.
Che cosa misura il test
Una cosa sola: se il tuo «sicuro al 90%» si avvera nove volte su dieci.
Il compito
- Il compito degli intervalli della ricerca sulla sovraprecisione: per ognuna di dieci domande numeriche, un intervallo che sei sicuro al 90% contenga il valore vero
- Dieci domande a partita — quattro date, tre di dimensione, distanza o temperatura, tre quantità — estratte a caso da un archivio di 55 e mescolate
- Premi sulla linea e trascina per stendere una rete; trascina una delle due boe o fai scorrere l’intera rete per regolarla. Mentre la stendi, la rete mostra quanto vale e diventa grigia appena copre tutto il mare. Le boe si muovono anche da tastiera
- Nessun riscontro finché tutte e dieci le reti non sono in acqua; poi cade ogni risposta e le reti che l’hanno presa diventano dorate
Il tuo risultato
- Punti su 100: ogni rete vale fino a 10, meno quanto più è larga; un pesce fuori costa punti, e una rete di tre quarti della linea o più vale 0 e non conta come cattura
- Quante delle tue dieci reti hanno preso la risposta, confrontate con quante ne prenderebbe un vero 90%
- Uno di cinque livelli: 9–10 «Il tuo 90% è davvero 90%», 7–8 un po’ troppo sicuro, 4–6 troppo sicuro, 3 o meno molto sicuro, spesso fuori — e «Troppo sul sicuro» quando le reti coprono tutto il mare o sono molto più larghe del necessario
- La probabilità che chi è davvero sicuro al 90% ne prenda poche quanto te, e quante volte più larga avrebbe dovuto essere ogni rete perché nove prendessero la risposta
- Per confronto, che cosa hanno trovato gli studi quando le persone davano intervalli al 90% (McKenzie et al. 2008; Moore et al. 2015)
- Un diario di pesca con ogni risposta e la sua fonte, una scheda da condividere che mostra il tuo totale ma nessuna risposta, e un link per sfidare un amico
Prima di iniziare
- Circa tre minuti
- Telefono o computer; sul computer le boe si spostano anche con i tasti freccia
- L’audio è facoltativo e si può disattivare
- Gratis, senza registrazione. Un link di sfida contiene il tuo nome e il tuo punteggio nel link stesso, dopo il #, e non viene caricato su nessun server
Domande sull’eccesso di fiducia
Questo test è gratuito? Devo registrarmi per vedere il risultato?
Sì, è gratuito e non serve registrarsi: niente account, niente email, niente pagamento. Il tuo risultato compare su questa pagina appena finisci, e puoi condividerlo o rigiocare subito.
Come si capisce se si ha un eccesso di fiducia?
Si danno intervalli con una fiducia dichiarata e si conta quante volte contengono la risposta. È il compito degli intervalli della ricerca sulla sovraprecisione, ed è quello che usa questo test sull’eccesso di fiducia: dieci domande numeriche, una rete sicura al 90% per ciascuna. Se i tuoi intervalli al 90% prendono molto meno di nove risposte su dieci, la tua fiducia corre più della tua precisione.
Come si calcola il punteggio del test sull’eccesso di fiducia?
Il test sull’eccesso di fiducia dà due numeri. Il tasso di successo conta quante delle tue dieci reti hanno preso la risposta vera e lo confronta con le nove che prenderebbe in media chi è davvero sicuro al 90%, insieme alla probabilità binomiale di una pesca bassa come la tua. I punti, su 100, aggiungono quanto erano larghe le reti: ogni rete vale fino a 10, meno quanto più è larga; un pesce fuori costa 20 volte la sua distanza, e una rete di tre quarti della linea o più vale 0. Le risposte restano nascoste finché tutte e dieci le reti non sono in acqua.
Qual è un risultato normale in un quiz di fiducia al 90%?
La scheda dei risultati lo mostra quando tutte e dieci le reti sono state gettate, così non influenza le tue. Cita i tassi di successo riportati nella rassegna di Moore, Tenney e Haran del 2015 sugli studi di stima per intervalli e nello studio di McKenzie, Liersch e Yaniv del 2008, in cui 135 persone hanno risposto a 40 domande ciascuna. Quegli studi usavano altre domande, quindi leggi il confronto come una tendenza, non come una classifica.
Da dove vengono le domande del test sull’eccesso di fiducia?
Il test sull’eccesso di fiducia estrae a caso dieci domande da un archivio di 55 fatti assodati da tempo: a ogni partita quattro date, tre di dimensione, distanza o temperatura e tre quantità. Ogni risposta è verificata su una fonte indicata, e il diario di pesca nella scheda dei risultati mostra ogni risposta con la sua fonte. Non serve conoscerne nessuna: il test chiede solo quanto sei sicuro.
Gli esperti hanno meno eccesso di fiducia?
La scheda dei risultati lo dice dopo le tue dieci reti, in base allo studio di McKenzie, Liersch e Yaniv del 2008, in cui 135 persone, tra esperti e principianti, hanno dato intervalli al 90% per 40 domande ciascuna. Sapere di più su un argomento permette di tenere stretta una rete; se questo tenga anche onesto un intervallo al 90% è proprio ciò che lo studio ha verificato.
Un punteggio basso significa che so poco?
Non il tasso di successo. Quella parte misura la calibrazione — se la tua sensazione di «sicuro» corrisponde a ciò che succede —, non quanto sai: reti onestamente larghe tengono il tasso vicino a nove su dieci senza sapere una sola risposta. I punti invece premiano anche le conoscenze, perché sapere di più ti permette di tenere le reti strette. Dieci reti sono anche un campione piccolo: perfino chi è perfettamente calibrato ne prende 8 o meno circa una volta su quattro.
E se facessi tutte le reti enormi?
Non conviene. Una rete che copre tre quarti della linea o più non può sbagliare, quindi diventa grigia mentre la stendi, vale 0 e non conta come cattura. Anche le reti larghe appena sotto quella soglia valgono poco, perché i punti di ogni rete calano con la sua larghezza. La scommessa migliore è la rete di cui sei davvero sicuro al 90%: larga quanto basta per scommetterci nove contro uno.
Da dove vengono i numeri
La tua pesca è confrontata con un vero 90% tramite la distribuzione binomiale e con i tassi di successo riportati da questi studi; i punti usano il punteggio degli intervalli di Winkler e di Gneiting e Raftery. Le domande qui sono diverse dalle loro, quindi non c’è un percentile. Ogni risposta dell’archivio di domande indica la propria fonte nel diario di pesca. Il sito non pubblica i dati dei propri giocatori.
- McKenzie, Liersch & Yaniv (2008), Organizational Behavior and Human Decision Processes — Overconfidence in interval estimates: What does expertise buy you? (eccesso di fiducia nelle stime per intervalli e ruolo della competenza)
- Moore, Tenney & Haran (2015), The Wiley Blackwell Handbook of Judgment and Decision Making — Overprecision in judgment (rassegna sulla sovraprecisione)
- Winkler (1972), Journal of the American Statistical Association — A decision-theoretic approach to interval estimation (origine del punteggio degli intervalli)
- Gneiting & Raftery (2007), Journal of the American Statistical Association — Strictly proper scoring rules, prediction, and estimation (regole di punteggio per le previsioni)
- Soll & Klayman (2004), Journal of Experimental Psychology: Learning, Memory, and Cognition — Overconfidence in interval estimates (eccesso di fiducia nelle stime per intervalli)
Come si calcola il punteggio
Tasso di successo
La quota dei tuoi dieci intervalli al 90% che contengono la risposta vera. Una calibrazione perfetta dà circa nove su dieci.
Punti (punteggio degli intervalli)
Ogni rete vale 10 × (1 − larghezza − 20 × distanza fuori), misurate come frazioni della sua linea e con un minimo di 0. È il punteggio degli intervalli per gli intervalli al 90% (Winkler 1972; Gneiting e Raftery 2007): la larghezza costa, e un errore costa 2 ÷ 10% = 20 volte la sua distanza, quindi allargare una rete per stare sul sicuro non conviene.
Rete su tutto il mare
Una rete che copre tre quarti della sua linea o più. Ogni risposta sta tra un decimo e nove decimi della sua linea, quindi una rete così non può sbagliare: vale 0 e non conta come cattura.
Sovraprecisione
Intervalli più stretti di quanto consenta la fiducia dichiarata: la forma di eccesso di fiducia che questo compito misura, passata in rassegna da Moore, Tenney e Haran (2015).
Verifica della calibrazione
Per chi è davvero sicuro al 90%, il numero di catture su dieci segue una distribuzione binomiale: 9 o 10 circa tre volte su quattro, 8 o meno circa una volta su quattro. Il risultato ti dice quanto spesso una pesca bassa come la tua capiterebbe per puro caso.
Fattore di allargamento
Quante volte più larga avrebbe dovuto essere ognuna delle tue reti perché nove su dieci prendessero la risposta.