Komputasi & AI · eksperimennya
Susun tiga puluh AI
Sebuah pertanyaan Fermi, satu tim berisi jawaban-jawaban AI, dan rata-ratanya. Perbesar timnya, campur model-modelnya, dan lihat apa yang bisa dikoreksi oleh kerumunan, dan apa yang tidak.
1 · Apa yang dihapus oleh rata-rata
Pemula
Saat kamu merata-ratakan jawaban satu model atas sebuah pertanyaan, bagian mana dari kesalahannya yang dapat dihapus?
Perbesar timnya, dengan porsi bersama yang diukur pada realFP, hingga tiga puluh jawaban.
2 · Campur model-modelnya
Menengah
Dua jawaban yang diambil dari model berbeda memiliki lebih sedikit kesalahan bersama: sekitar ρ = 0,591. Dengan porsi bersama itu, tim berisi tiga puluh setara dengan berapa agen independen?
3 · Seribu agen
Mahir
Kembali ke satu model, ρ = 0,906, tetapi dengan tim berisi seribu jawaban. Tim itu setara dengan berapa agen independen?
4 · Apa yang harus berubah
Mahir
Agar tim berisi tiga puluh setara dengan lima agen independen, apa yang harus berubah?
Periksalah: turunkan porsi bersama sampai tim berisi tiga puluh setara dengan paling sedikit lima agen independen.
Tim tersusun
—