Kendime aşırı mı güveniyorum?
Bu aşırı güven testi, “%90 eminim” dediğinde gerçekten on seferin dokuzunda haklı çıkıp çıkmadığını anlamak için klasik %90 güven aralığı görevini kullanır. On sayısal sorunun her birinde, cevabın içinde olduğundan %90 emin olana kadar bir ağ gerersin; cevaplar ancak on ağın hepsi atıldığında düşer. Araştırmacılar bu görevi onlarca yıldır kullanıyor; örneğin McKenzie, Liersch ve Yaniv 2008’de 135 kişinin her birine 40 soru sordu. Sonuç sayfası, yakaladıklarının bu çalışmalarla nasıl karşılaştırıldığını gösterir.
İşleyiş şöyle: tarihler, büyüklükler ve uzaklıklar, sayılar gibi on sayısal soru, uzun zamandır kesinleşmiş 55 bilgiden oluşan bir soru bankasından rastgele çekilir; her biri belirtilen bir kaynakla doğrulanmıştır. Her soruda bir çizgi boyunca bir ağ sürükler, cevabın içinde olduğundan %90 emin olana kadar genişletirsin. On ağın hepsi atılana kadar hiçbir şey açıklanmaz; böylece bir ıska sana sonraki ağı genişletmeyi öğretmez. Ardından cevaplar düşer. Gerçekten %90’lık on aralık yaklaşık dokuz cevap yakalamalı; dokuz ile yakaladığın sayı arasındaki fark, aşırı güveninin ölçüsüdür. Bütün çizgiyi kaplayan bir ağ her şeyi yakalayacağı için, her ağ ayrıca tahmin aralıklarında kullanılan aralık puanıyla en fazla 10 puan alır: dar ağlar daha çok puan alır, dışarıda kalan balık puan götürür, çizginin dörtte üçünü ya da fazlasını kaplayan ağ hiç puan almaz. Sonuç ayrıca, gerçekten %90 emin olan birinin senin kadar az yakalama olasılığını ve ağlarının ne kadar daha geniş olması gerektiğini de gösterir.
İsabet oranı bilgiyi ya da zekâyı değil, kalibrasyonu ölçer: hiçbir cevabı bilmen gerekmez, yalnızca ne kadar emin olmadığını bilmen yeterli. Puanlar ise ağları dar tutacak kadar bilmeyi de ödüllendirir. On ağ küçük bir örneklem: kusursuz kalibre olmuş biri bile yaklaşık dörtte bir ihtimalle 8 ya da daha az yakalar. Sorular çalışmalardakilerle aynı değil; bu yüzden onlarla karşılaştırma bir sıralama değil, bir örüntü gösterir.
Test neyi ölçer
Tek bir şeyi: “%90 eminim” dediğin şeyin on seferde dokuz kez tutup tutmadığını.
Görev
- Aşırı kesinlik araştırmalarındaki aralık görevi: on sayısal sorunun her biri için gerçek değeri içerdiğinden %90 emin olduğun bir aralık
- Her turda on soru — dört tarih, üç büyüklük, uzaklık ya da sıcaklık, üç sayı — 55 soruluk bir bankadan rastgele çekilip karıştırılır
- Ağ sermek için çizgiye bas ve sürükle; ayarlamak için şamandıralardan birini sürükle ya da ağın tamamını kaydır. Sererken ağ kaç puan ettiğini gösterir ve bütün denizi kapladığında griye döner. Şamandıralar klavyeyle de hareket eder
- On ağın hepsi atılana kadar hiçbir geri bildirim yok; sonra her cevap düşer ve onu yakalayan ağlar altın rengine döner
Sonucun
- 100 üzerinden puan: her ağ en fazla 10 alır, genişledikçe azalır; dışarıda kalan balık puan götürür, çizginin dörtte üçünü ya da fazlasını kaplayan ağ 0 alır ve yakalama sayılmaz
- On ağından kaçının cevabı yakaladığı ve bunun gerçek bir %90’ın yakalayacağıyla karşılaştırması
- Beş seviyeden biri: 9–10 “Senin %90’ın gerçekten %90”, 7–8 biraz fazla güven, 4–6 aşırı güven, 3 ya da daha az çok emin, sıkça yanılıyor — ve ağlar bütün denizi kapladığında ya da gerekenden çok daha geniş olduğunda “Fazla temkinli”
- Gerçekten %90 emin olan birinin senin kadar az yakalama olasılığı ve dokuzunun yakalaması için her ağın kaç kat geniş olması gerektiği
- Karşılaştırma için, insanlar %90 aralıkları verdiğinde çalışmaların bulduğu sonuçlar (McKenzie ve ark. 2008; Moore ve ark. 2015)
- Her cevabı ve kaynağını gösteren bir av günlüğü, toplam puanını gösterip hiçbir cevabı göstermeyen bir paylaşım kartı ve bir arkadaşına meydan okuyan bir bağlantı
Başlamadan önce
- Yaklaşık üç dakika
- Telefon ya da bilgisayar; bilgisayarda şamandıralar ok tuşlarıyla da hareket eder
- Ses isteğe bağlı ve kapatılabilir
- Ücretsiz, kayıt yok. Meydan okuma bağlantısı adını ve puanını bağlantının kendisinde, # işaretinden sonra taşır ve hiçbir yere yüklenmez
Aşırı güven hakkında sık sorulanlar
Bu test ücretsiz mi? Sonucumu görmek için kaydolmam gerekiyor mu?
Evet, ücretsiz ve kayıt yok: hesap, e-posta ya da ödeme gerekmez. Bitirdiğin anda sonucun bu sayfada görünür; hemen paylaşabilir ya da yeniden oynayabilirsin.
Kendime aşırı güvenip güvenmediğimi nasıl test ederim?
Belirli bir güvenle aralıklar ver ve bunların kaç kez cevabı içerdiğini say. Bu, aşırı kesinlik araştırmalarındaki aralık görevidir ve bu aşırı güven testi de onu kullanır: on sayısal soru, her biri için %90 emin olduğun bir ağ. %90 aralıkların ondan dokuzdan çok daha az cevap yakalıyorsa, güvenin isabetinin önünde koşuyor demektir.
Aşırı güven testi nasıl puanlanıyor?
Aşırı güven testi iki sayı verir. İsabet oranı, on ağından kaçının gerçek cevabı yakaladığını sayar ve bunu gerçekten %90 emin birinin ortalamada yakalayacağı dokuzla, senin kadar düşük bir avın binom olasılığıyla birlikte karşılaştırır. 100 üzerinden puanlar ağların genişliğini de hesaba katar: her ağ en fazla 10 alır, genişledikçe azalır; dışarıda kalan balık uzaklığının 20 katı puan götürür, çizginin dörtte üçünü ya da fazlasını kaplayan ağ 0 alır. On ağın hepsi atılana kadar cevaplar gizli kalır.
%90 güven testinde normal sonuç nedir?
Bunu sonuç sayfası, on ağın hepsi atıldıktan sonra gösterir; böylece kendi ağların bundan etkilenmez. Moore, Tenney ve Haran’ın aralık tahmini çalışmalarını derleyen 2015 tarihli incelemesinde ve McKenzie, Liersch ve Yaniv’in 135 kişinin her birinin 40 soruyu yanıtladığı 2008 çalışmasında bildirilen isabet oranlarını aktarır. Bu çalışmalar başka sorular kullandığı için karşılaştırmayı bir sıralama değil, bir örüntü olarak oku.
Aşırı güven testindeki sorular nereden geliyor?
Aşırı güven testi, uzun zamandır kesinleşmiş 55 bilgiden oluşan bir bankadan her turda on soruyu rastgele çeker: dört tarih, üç büyüklük, uzaklık ya da sıcaklık ve üç sayı. Her cevap belirtilen bir kaynakla doğrulanmıştır ve sonuç sayfasındaki av günlüğü her cevabı kaynağıyla birlikte gösterir. Hiçbirini bilmen gerekmez: test yalnızca ne kadar emin olduğunu sorar.
Uzmanlar daha az mı aşırı güvenir?
Bunu sonuç sayfası, on ağından sonra yanıtlar; dayanağı McKenzie, Liersch ve Yaniv’in 2008 çalışmasıdır. Bu çalışmada aralarında uzmanların da yeni başlayanların da olduğu 135 kişi, her biri 40 soru için %90 aralıklar verdi. Bir konuda daha çok bilmek ağı dar tutmanı sağlar; bunun %90’lık bir aralığı dürüst tutup tutmadığı ise tam olarak çalışmanın sınadığı şeydi.
Düşük puan az bildiğim anlamına mı gelir?
İsabet oranı açısından hayır. O kısım kalibrasyonu ölçer — “eminim” hissinin olanlarla örtüşüp örtüşmediğini —, ne kadar bildiğini değil: dürüstçe geniş ağlar, tek bir cevabı bilmeden de isabet oranını ondan dokuza yakın tutar. Puanlar ise bilgiyi de ödüllendirir, çünkü daha çok bilmek ağları dar tutmanı sağlar. Ayrıca on ağ küçük bir örneklem: kusursuz kalibre olmuş biri bile yaklaşık dörtte bir ihtimalle 8 ya da daha az yakalar.
Her ağı devasa yapsam olmaz mı?
İşe yaramaz. Çizginin dörtte üçünü ya da fazlasını kaplayan bir ağ ıskalayamaz; bu yüzden sererken griye döner, 0 alır ve yakalama sayılmaz. Bunun hemen altındaki geniş ağlar da az puan alır, çünkü her ağın puanı genişliğiyle birlikte azalır. En iyi seçim, dürüstçe %90 emin olduğun ağdır: üzerine dokuza bir bahse girebileceğin kadar geniş, o kadar.
Sayılar nereden geliyor
Yakaladıkların binom dağılımıyla gerçek bir %90 ile ve bu çalışmaların bildirdiği isabet oranlarıyla karşılaştırılır; puanlar Winkler’in ve Gneiting ile Raftery’nin aralık puanını kullanır. Buradaki sorular onlarınkinden farklı olduğu için yüzdelik dilim yok. Soru bankasındaki her cevabın kendi kaynağı av günlüğünde yer alır. Site kendi oyuncularının verilerini yayımlamaz.
- McKenzie, Liersch & Yaniv (2008), Organizational Behavior and Human Decision Processes — Overconfidence in interval estimates: What does expertise buy you? (aralık tahminlerinde aşırı güven ve uzmanlığın rolü)
- Moore, Tenney & Haran (2015), The Wiley Blackwell Handbook of Judgment and Decision Making — Overprecision in judgment (yargıda aşırı kesinlik üzerine derleme)
- Winkler (1972), Journal of the American Statistical Association — A decision-theoretic approach to interval estimation (aralık puanının çıkış noktası)
- Gneiting & Raftery (2007), Journal of the American Statistical Association — Strictly proper scoring rules, prediction, and estimation (tahminleri değerlendiren puanlama kuralları)
- Soll & Klayman (2004), Journal of Experimental Psychology: Learning, Memory, and Cognition — Overconfidence in interval estimates (aralık tahminlerinde aşırı güven)
Nasıl puanlanır
İsabet oranı
On tane %90 aralığından gerçek cevabı içerenlerin payı. Kusursuz kalibrasyon yaklaşık ondan dokuzdur.
Puanlar (aralık puanı)
Her ağ 10 × (1 − genişlik − 20 × dışarıda kalan uzaklık) puan alır; ikisi de çizginin payı olarak ölçülür ve en az 0’dır. Bu, %90 aralıkları için kullanılan aralık puanıdır (Winkler 1972; Gneiting ve Raftery 2007): genişliğin bir bedeli var, ıskalamak ise uzaklığın 2 ÷ %10 = 20 katına mal olur; bu yüzden güvende olmak için ağı germek işe yaramaz.
Bütün denizi kaplayan ağ
Çizgisinin dörtte üçünü ya da fazlasını kaplayan ağ. Her cevap çizgisinin onda biri ile onda dokuzu arasındadır, bu yüzden böyle bir ağ ıskalayamaz: 0 alır ve yakalama sayılmaz.
Aşırı kesinlik
Belirttiğin güvenin izin verdiğinden dar aralıklar: bu görevin ölçtüğü aşırı güven biçimi; Moore, Tenney ve Haran (2015) tarafından derlenmiştir.
Kalibrasyon kontrolü
Gerçekten %90 emin olan biri için ondan kaç yakalama olacağı binom dağılımına uyar: yaklaşık dört seferin üçünde 9 ya da 10, yaklaşık dörtte bir ihtimalle 8 ya da daha az. Sonucun, senin kadar düşük bir avın yalnızca şansla ne sıklıkta olacağını söyler.
Genişletme katsayısı
Onda dokuzunun cevabı yakalaması için ağlarının her birinin kaç kat daha geniş olması gerekirdi.