Tens confiança a mais?

weirdly accurate.

Tens confiança a mais?

    Tenho excesso de confiança?

    Este teste de excesso de confiança usa a tarefa clássica dos intervalos de confiança a 90% para descobrir se o teu «tenho 90% de certeza» se confirma mesmo nove vezes em dez. Em dez perguntas numéricas, esticas uma rede até teres 90% de certeza de que a resposta está lá dentro, e só quando as dez estão lançadas é que as respostas caem. Os investigadores usam esta tarefa há décadas; McKenzie, Liersch e Yaniv, por exemplo, deram 40 perguntas a cada uma de 135 pessoas em 2008. A folha de resultados mostra como fica a tua pesca ao lado desses estudos.

    Funciona assim: recebes dez perguntas numéricas — datas, tamanhos e distâncias, quantidades — tiradas ao acaso de um banco de 55 factos há muito estabelecidos, cada um confirmado numa fonte indicada. Em cada uma, arrastas uma rede ao longo de uma linha até teres 90% de certeza de que a resposta está lá dentro. Nada é revelado antes de lançares as dez, para que uma falha não te ensine a alargar a seguinte; depois, as respostas caem. Dez intervalos verdadeiros a 90% deviam apanhar cerca de nove, e a diferença entre nove e a tua pesca é o teu excesso de confiança. Como uma rede que cobre a linha toda apanharia tudo, cada rede também vale até 10 pontos, com a pontuação de intervalos usada nos intervalos de previsão: redes mais justas valem mais, um peixe fora tira pontos e uma rede com três quartos da linha ou mais não vale nada. O resultado mostra ainda qual seria a probabilidade de uma pesca tão pequena como a tua para alguém que tem mesmo 90% de certeza, e quanto mais largas as tuas redes precisavam de ser.

    A taxa de acerto mede a calibração, não o conhecimento nem a inteligência: não precisas de saber nenhuma resposta, só o quanto não tens a certeza. Os pontos também premeiam saber o suficiente para manter as redes justas. Dez redes são uma amostra pequena — mesmo uma pessoa perfeitamente calibrada apanha 8 ou menos cerca de uma vez em cada quatro. As perguntas não são as dos estudos, por isso a comparação com eles mostra o padrão, não uma classificação.

    O que o teste mede

    Uma só coisa: se os teus «90% de certeza» se confirmam nove vezes em dez.

    A tarefa

    • A tarefa de intervalos da investigação sobre sobreprecisão: para cada uma de dez perguntas numéricas, um intervalo em que tens 90% de certeza de que está o valor verdadeiro
    • Dez perguntas por jogo — quatro datas, três de tamanho, distância ou temperatura, três quantidades — tiradas ao acaso de um banco de 55 e baralhadas
    • Carrega na linha e arrasta para estender uma rede; arrasta qualquer uma das boias ou desliza a rede inteira para a ajustar. Enquanto a estendes, a rede mostra quanto vale e fica cinzenta quando cobre o mar todo. As boias também se mexem com o teclado
    • Não há qualquer pista até as dez redes estarem lançadas; depois cai cada resposta e as redes que a apanharam ficam douradas

    O teu resultado

    • Pontos em 100: cada rede vale até 10, menos quanto mais larga for; um peixe fora tira pontos, e uma rede com três quartos da linha ou mais vale 0 e não conta como apanhada
    • Quantas das tuas dez redes apanharam a resposta, ao lado do que uns verdadeiros 90% apanhariam
    • Um de cinco níveis: 9–10 «Os teus 90% são mesmo 90%», 7–8 um pouco de confiança a mais, 4–6 excesso de confiança, 3 ou menos muita certeza, muitos erros — e «Pelo seguro demais» quando as redes cobrem o mar todo ou são muito mais largas do que a pesca precisava
    • A probabilidade de alguém com 90% de certeza a sério apanhar tão poucas como tu, e quantas vezes mais larga cada rede precisava de ser para nove apanharem
    • Para comparação, o que os estudos encontraram quando as pessoas deram intervalos a 90% (McKenzie et al. 2008; Moore et al. 2015)
    • Um registo da pesca com cada resposta e a sua fonte, um cartão para partilhar que mostra o teu total mas nenhuma resposta, e uma ligação para desafiar um amigo

    Antes de começares

    • Cerca de três minutos
    • Telemóvel ou computador; no computador, as boias também se mexem com as setas do teclado
    • O som é opcional e pode ser desligado
    • Gratuito e sem registo. Uma ligação de desafio leva o teu nome e a tua pontuação dentro da própria ligação, depois do #, e não é enviada para nenhum servidor

    Perguntas frequentes sobre excesso de confiança

    Este teste é gratuito? Preciso de me registar para ver o resultado?

    Sim, é gratuito e não há registo: sem conta, sem email, sem pagamento. O teu resultado aparece nesta página assim que terminas, e podes partilhá-lo ou jogar outra vez de imediato.

    Como sei se tenho excesso de confiança?

    Dá intervalos com uma confiança declarada e conta quantas vezes contêm a resposta. É a tarefa de intervalos da investigação sobre sobreprecisão, e é a que este teste de excesso de confiança usa: dez perguntas numéricas, uma rede com 90% de certeza para cada uma. Se os teus intervalos a 90% apanharem muito menos de nove respostas em dez, a tua confiança vai à frente da tua precisão.

    Como é pontuado o teste de excesso de confiança?

    O teste de excesso de confiança dá dois números. A taxa de acerto conta quantas das tuas dez redes apanharam a resposta verdadeira e compara-a com as nove que alguém com 90% de certeza a sério apanharia em média, com a probabilidade binomial de uma pesca tão baixa como a tua. Os pontos, em 100, juntam a largura das redes: cada rede vale até 10, menos quanto mais larga for; um peixe fora tira 20 vezes a sua distância, e uma rede com três quartos da linha ou mais vale 0. As respostas ficam escondidas até as dez redes estarem lançadas.

    Qual é um resultado normal num teste de confiança a 90%?

    A folha de resultados mostra-o depois de lançares as dez redes, para não influenciar as tuas. Cita as taxas de acerto relatadas na revisão de Moore, Tenney e Haran de 2015 sobre estudos de estimativas por intervalos, e no estudo de McKenzie, Liersch e Yaniv de 2008, com 135 pessoas a responder a 40 perguntas cada uma. Esses estudos usaram outras perguntas, por isso lê a comparação como um padrão, não como uma classificação.

    De onde vêm as perguntas do teste de excesso de confiança?

    O teste de excesso de confiança tira ao acaso dez perguntas de um banco de 55 factos há muito estabelecidos: em cada jogo, quatro datas, três de tamanho, distância ou temperatura e três quantidades. Cada resposta está confirmada numa fonte indicada, e o registo da pesca na folha de resultados mostra cada resposta com a sua fonte. Não precisas de saber nenhuma: o teste só pergunta quanta certeza tens.

    Os especialistas têm menos excesso de confiança?

    A folha de resultados responde a isso depois das tuas dez redes, com base no estudo de McKenzie, Liersch e Yaniv de 2008, em que 135 pessoas, entre elas especialistas e principiantes, deram intervalos a 90% para 40 perguntas cada uma. Saber mais sobre um tema permite manter uma rede justa; se isso também mantém honesto um intervalo a 90% foi precisamente o que o estudo testou.

    Uma pontuação baixa quer dizer que sei pouco?

    A taxa de acerto, não. Essa parte mede a calibração — se a tua sensação de «certeza» bate certo com o que acontece —, não quanto sabes: redes honestamente largas mantêm a taxa perto de nove em dez sem saberes uma única resposta. Os pontos também premeiam o conhecimento, porque saber mais deixa-te manter as redes justas. E dez redes são uma amostra pequena: mesmo alguém perfeitamente calibrado apanha 8 ou menos cerca de uma vez em cada quatro.

    E se eu fizer todas as redes enormes?

    Não compensa. Uma rede que cobre três quartos da linha ou mais não pode falhar, por isso fica cinzenta enquanto a estendes, vale 0 e não conta como apanhada. As redes largas logo abaixo disso também valem pouco, porque os pontos de cada rede descem com a largura. A melhor aposta é a rede de que tens mesmo 90% de certeza — só larga o suficiente para apostares nove contra um nela.

    De onde vêm os números

    A tua pesca é comparada com uns verdadeiros 90% através da distribuição binomial, e com as taxas de acerto que estes estudos relatam; os pontos usam a pontuação de intervalos de Winkler e de Gneiting e Raftery. As perguntas aqui são diferentes das deles, por isso não há percentil. Cada resposta do banco de perguntas indica a sua própria fonte no registo da pesca. O site não publica dados dos seus próprios jogadores.

    Como se pontua

    Taxa de acerto

    A proporção dos teus dez intervalos a 90% que contêm a resposta verdadeira. A calibração perfeita dá cerca de nove em dez.

    Pontos (pontuação de intervalos)

    Cada rede vale 10 × (1 − largura − 20 × distância fora), medidas como frações da sua linha e com mínimo de 0. É a pontuação de intervalos para intervalos a 90% (Winkler 1972; Gneiting e Raftery 2007): a largura custa, e uma falha custa 2 ÷ 10% = 20 vezes a sua distância, por isso esticar a rede para jogar pelo seguro não compensa.

    Rede sobre o mar todo

    Uma rede com três quartos da sua linha ou mais. Todas as respostas ficam entre um décimo e nove décimos da sua linha, por isso uma rede assim não pode falhar: vale 0 e não conta como apanhada.

    Sobreprecisão

    Intervalos mais estreitos do que a confiança declarada permite: a forma de excesso de confiança que esta tarefa mede, revista por Moore, Tenney e Haran (2015).

    Teste de calibração

    Para alguém com 90% de certeza a sério, o número de capturas em dez segue uma distribuição binomial: 9 ou 10 cerca de três vezes em quatro, 8 ou menos cerca de uma vez em quatro. O resultado diz com que frequência uma pesca tão baixa como a tua aconteceria só por sorte.

    Fator de alargamento

    Quantas vezes mais larga cada uma das tuas redes teria de ser para nove das dez apanharem a resposta.