Apakah kamu percaya pada robot?
Tes kepercayaan pada AI ini memakai metode hakim–penasihat dari riset pengambilan keputusan untuk mengetahui seberapa jauh kamu bersandar pada angka asisten AI, dan apakah bersandar membuatmu lebih akurat. Para peneliti sudah berkali-kali memakai rancangan ini, di antaranya Ilan Yaniv pada 2004 dengan 30 orang yang menjawab pertanyaan tentang tahun-tahun bersejarah, serta Logg, Minson, dan Moore pada 2019 dengan 202 orang yang menebak berat badan dari foto. Setelah talenan terakhir, hasilmu menaruh angkamu di samping angka mereka.
Tes ini membawa rancangan yang sama ke meja dapur. Di setiap talenan dari sembilan talenan, serbet terangkat beberapa detik, 3 detik di awal dan 1,7 detik di akhir, di atas blueberry, gula batu, biji kopi, dan benda kecil lain yang makin banyak dan makin kecil. Kamu menentukan hitunganmu, asisten AI memberi hitungannya, lalu kamu bisa menggeser hitunganmu atau membiarkannya sebelum jumlah sebenarnya dibuka. Bobot saranmu dihitung seperti dalam Yaniv (2004): seberapa jauh kamu bergeser, sebagai bagian dari jarak antara hitungan pertamamu dan hitungan asisten. Hasilnya menampilkan angka itu di samping studi-studi tersebut dan memberi tahu apakah bersandar pada asisten membuat jawabanmu lebih baik atau lebih buruk.
Ini bukan tes kepribadian. Sembilan talenan adalah sampel kecil, dan studi-studi itu memakai tugas lain (berat badan dari foto, tahun bersejarah, prakiraan), jadi perbandingannya kasar dan tidak ada persentil. Tidak ada model AI yang dipanggil selama kamu bermain: asistennya berjalan di halaman ini, dan tidak ada yang kamu masukkan yang diunggah.
Apa yang diukur tes ini
Satu hal saja: seberapa jauh kamu bergeser ke jawaban asisten AI, dan apa pengaruhnya pada akurasimu.
Tugasnya
- Sembilan talenan, dari blueberry sampai butir merica: tiap talenan berisi benda yang lebih banyak dan lebih kecil, dan waktu melihat menyusut dari 3 detik ke 1,7
- Rancangan hakim–penasihat dari riset pengambilan keputusan: perkiraan pertamamu, hitungan asisten, perkiraan akhirmu
- Tentukan hitunganmu dengan penggeser; setelah asisten bicara, angkanya dan hitungan pertamamu tetap ditandai di penggeser yang sama
- Jumlah sebenarnya setelah setiap talenan; jawaban akhir yang selisihnya tidak lebih dari 15% dihitung dekat
Hasilmu
- Bobot saranmu: seberapa jauh kamu bergeser ke asisten, dari 0% (tetap pada hitunganmu) sampai 100% (memakai angkanya)
- Sebutan untuk caramu memakai asisten, dan kesembilan talenan dalam satu skala: hitungan pertamamu, hitungan asisten, hitungan akhirmu, dan jumlah sebenarnya
- Siapa yang paling dekat dengan jumlah sebenarnya: hitungan pertamamu, hitungan akhirmu, asisten, atau sekadar mengambil titik tengah setiap kali
- Titik acuan dari studi, ditampilkan setelah talenan terakhir: seberapa jauh orang bergeser ke sebuah saran dalam studi hakim–penasihat, dan ke saran yang sama ketika disebut berasal dari algoritma
- Kartu yang bisa dibagikan dan tautan tantangan yang memberi temanmu sembilan talenan yang sama
Sebelum mulai
- Sekitar dua menit; gratis, tanpa daftar
- Bisa di ponsel atau komputer dengan grafis 3D (WebGL): seret kenopnya, ketuk − dan +, atau pakai tombol panah; suara opsional
- Tidak ada yang kamu masukkan yang diunggah; tautan tantangan membawa angkamu di dalam tautan itu sendiri, setelah tanda #
Pertanyaan tentang kepercayaan pada AI
Apakah tes ini gratis? Perlu daftar untuk melihat hasilnya?
Ya, gratis dan tidak perlu daftar: tanpa akun, tanpa email, tanpa bayar. Hasilmu langsung muncul di halaman ini begitu selesai, dan bisa langsung dibagikan atau dimainkan lagi.
Apakah orang lebih percaya saran AI daripada saran manusia?
Lembar hasil menjawabnya setelah sembilan talenanmu selesai, berdasarkan eksperimen Logg, Minson, dan Moore tahun 2019. Mereka memberi orang saran yang sama, kadang disebut berasal dari algoritma dan kadang dari orang lain, dalam tugas seperti menebak berat badan dari foto (202 orang), mengurutkan lagu, dan memprediksi ketertarikan romantis, lalu mengukur seberapa jauh tiap label menggeser mereka. Angkanya ditahan sampai akhir karena mengetahuinya lebih dulu akan mengubah seberapa besar bobot yang kamu berikan pada asisten.
Bagaimana tes kepercayaan pada AI menilai saya?
Tes kepercayaan pada AI memakai bobot saran, ukuran standar dalam studi hakim–penasihat: seberapa jauh hitungan akhirmu bergeser dari hitungan pertama ke arah hitungan asisten, sebagai bagian dari selisih keduanya. Tetap pada hitunganmu bernilai 0%, memakai hitungan asisten bernilai 100%. Talenan yang hitunganmu sudah sama dengan asisten tidak dihitung.
Berapa bobot saran yang normal?
Angka-angka khasnya muncul di lembar hasil di samping bobot saranmu sendiri, setelah sembilan talenan selesai. Angka itu berasal dari studi Ilan Yaniv tahun 2004, ketika 30 orang menjawab 15 pertanyaan tentang tahun-tahun bersejarah lalu melihat perkiraan orang lain, dan dari ringkasan riset yang dibuat Logg dan rekan-rekannya pada 2019. Halaman ini menyimpannya dulu karena angka yang bisa dibidik akan mengubah apa yang kamu lakukan.
Apakah asisten AI di tes ini benar-benar AI?
Bukan. Tidak ada model AI yang dipanggil selama kamu bermain: asisten di tes kepercayaan pada AI adalah skrip yang berjalan di halaman ini, dan tidak ada yang kamu masukkan yang diunggah. Lembar hasil menjelaskan dengan tepat bagaimana hitungannya ditentukan setelah kamu menyelesaikan kesembilan talenan, karena mengetahuinya lebih dulu akan mengubah caramu memperlakukannya.
Riset apa yang mendasari tes kepercayaan pada AI?
Tes kepercayaan pada AI memakai rancangan hakim–penasihat dari riset pengambilan keputusan, dengan skor bobot saran dari Ilan Yaniv (2004). Lembar hasil juga memakai Logg, Minson, dan Moore (2019), Dietvorst, Simmons, dan Massey (2015, 361 orang), Parasuraman dan Manzey (2010), serta Soll dan Larrick (2009), dan menjelaskan temuan masing-masing setelah talenan terakhirmu. Referensi lengkapnya ada di bagian "Asal angka-angkanya".
Haruskah saya merata-ratakan jawaban saya dengan jawaban AI?
Tes kepercayaan pada AI menyerahkan pilihan itu padamu, karena cara kamu menggabungkan dua angka itulah yang diukurnya. Setelah selesai, lembar hasil menunjukkan bagaimana hasilnya kalau kamu selalu mengambil titik tengah di setiap talenan, dibandingkan hitungan pertamamu, hitungan akhirmu, dan asisten, serta apa kata riset Soll dan Larrick tahun 2009 tentang merevisi penilaian soal merata-ratakan.
Apakah ini tes kepribadian?
Bukan. Tes kepercayaan pada AI mencatat caramu memakai satu asisten di sembilan talenan hitungan. Studi pembandingnya memakai tugas lain, seperti berat badan dari foto, tahun bersejarah, dan prakiraan, jadi perbandingannya adalah acuan kasar, bukan peringkat.
Asal angka-angkanya
Tidak ada data populasi untuk bobot saran pada tugas menghitung seperti ini, jadi hasilnya tidak memberi persentil; hasilnya menaruh angkamu di samping nilai khas dari studi (Yaniv 2004, Studi 1; Logg dkk. 2019, Eksperimen 1A). Situs ini tidak menerbitkan data pemainnya sendiri.
- Yaniv (2004), Organizational Behavior and Human Decision Processes — Receiving other people’s advice: Influence and benefit
- Logg, Minson & Moore (2019), Organizational Behavior and Human Decision Processes — Algorithm appreciation: People prefer algorithmic to human judgment
- Dietvorst, Simmons & Massey (2015), Journal of Experimental Psychology: General — Algorithm aversion: People erroneously avoid algorithms after seeing them err
- Parasuraman & Manzey (2010), Human Factors — Complacency and bias in human use of automation: An attentional integration
- Soll & Larrick (2009), Journal of Experimental Psychology: Learning, Memory, and Cognition — Strategies for revising judgment
Cara skornya dihitung
Bobot saran
(akhir − pertama) ÷ (saran − pertama), ukuran standar dari Yaniv (2004), dibatasi antara 0 dan 1. Tidak bergeser bernilai 0, memakai saran bernilai 1, bertemu di tengah bernilai 0,5.
Dekat
Hitungan akhir yang selisihnya tidak lebih dari 15% dari jumlah sebenarnya. Akurasi dibandingkan lewat rata-rata kesalahan hitungan pertamamu, hitungan akhirmu, asisten, dan titik tengahnya.