Profesor Sanjay Kumar, salah satu direktur Program Lok Neethi di Pusat Studi Masyarakat Berkembang (CSDS) tentang kesalahan hasil pemilu Lok Sabha dan exit poll. Sesi ini dimoderatori oleh Editor Nasional Dijelaskan Monojit Mazumdar
Saya tidak pernah percaya Aliansi Demokratik Nasional (NDA) akan mencapai angka 400. Mungkin jumlah 340-350 berada dalam kisaran NDA, meskipun perkiraan pribadi saya adalah 320-330 kursi. Masalah besarnya adalah sebagian besar lembaga survei tidak memerinci bagaimana mereka sampai pada angka tersebut. Itu sangat mengejutkan saya.
Hitungan NDA di bawah 300 agak mengejutkan, namun tidak sepenuhnya mengejutkan. Saat kami melakukan analisis pasca-pemungutan suara, saya menyadari bahwa BJP sedang menghadapi situasi yang sulit di UP, meskipun saya tidak memperkirakan mereka akan mengalami kesulitan di Benggala Barat. Jadi secara keseluruhan, saya tidak terlalu terkejut dengan hasilnya.
Tentang metodologi yang digunakan oleh lembaga survei
Pertama, Anda perlu memahami apa yang bisa – dan tidak bisa – dilakukan oleh exit poll. Mereka dirancang untuk memberi Anda arahan yang luas, mereka tidak memberi Anda rincian seperti yang diberikan oleh lembaga survei saat ini. Mengenai cara pelaksanaan exit poll, standardisasi adalah suatu keharusan. Anda tidak dapat mengirim 500 peneliti ke lapangan dan memberi tahu mereka bahwa mereka bebas melakukan apa pun yang mereka inginkan. Standardisasi berarti menanyakan pertanyaan yang kurang lebih sama kepada semua orang yang datanya Anda kumpulkan.
Pengambilan sampel secara acak juga merupakan suatu keharusan. Anda tidak bisa menyuruh penyelidik untuk menghampiri seseorang di jalan dan mengajukan pertanyaan kepada mereka. Pertama menggambar sebuah pola. Jika orang-orang dikirim ke Maharashtra, mereka tidak bisa hanya pergi ke Mumbai dan “tempat bagus” lainnya untuk melakukan survei. Transparansi sangat penting dalam hal metodologi – mengenai proses pengambilan sampel, tentang pelaksanaan kerja lapangan, bagaimana margin of error dicapai, berapa margin of errornya.
Bagaimana proses survei bekerja
Pertama adalah proses pengambilan sampel. Kami melakukan pengambilan sampel secara acak terhadap daerah pemilihan parlemen, TPS, dan memilih pemilih untuk diwawancarai. Surveyor juga harus dilatih mengenai pertanyaan-pertanyaan yang harus mereka ajukan dan bagaimana cara menjawabnya. Kami mempekerjakan orang-orang dari berbagai universitas, kebanyakan mahasiswa. Saat ini, instrumen survei hadir dalam bentuk aplikasi seluler yang pertanyaannya mengalir satu demi satu. Penting untuk menjaga kerahasiaan preferensi pemilih. Itu sebabnya kami meminta surveyor kami untuk memberikan telepon kepada responden untuk pertanyaan tersebut. Responden mengklik simbol yang telah/akan dipilihnya.
Aplikasi yang digunakan untuk survei ini diaktifkan secara geografis, yang berarti kami dapat melacak pergerakan peneliti dan melihat berapa banyak waktu yang mereka habiskan untuk responden dan apakah mereka menanyakan setiap pertanyaan. Setelah wawancara selesai, data secara otomatis diunggah ke server kami. Survei pada dasarnya memberi kita preferensi pemilih, siapa yang akan mereka pilih. Mengumpulkan data ini memberi kita perolehan suara dari partai-partai tersebut. Itu harus diubah menjadi kursi. Hal ini dilakukan berdasarkan apa yang kami sebut “faktor probabilitas”, yang memperhitungkan perolehan suara pada pemilu Lok Sabha sebelumnya dan perolehan kursi masing-masing. Jadi, pada akhirnya
Jika suatu partai memperoleh 12 kursi dari 20 persen perolehan suara pada pemilu Lok Sabha, maka dapat diperkirakan kursi mana yang akan diperoleh partai tersebut dengan perolehan 25 persen.
Pembagian suara. Hal ini dilakukan dengan bantuan program komputer. Namun, saya tidak yakin apakah orang lain melakukan survei seperti ini, terutama memberikan perkiraan berdasarkan kursi. Untuk itu, diperlukan sampel yang lebih besar di setiap daerah pemilihan. Saya pikir lembaga survei mengambil banyak jalan pintas dalam hal proyeksi kursi. Alasan yang jelas dibalik hal ini adalah pengurangan biaya.
Tentang belanja exit poll
Metode pengumpulan data mempunyai hubungan yang sangat besar dengan biaya. Mengumpulkan data melalui telepon jauh lebih murah dibandingkan survei lapangan. Yang terakhir ini lebih mahal karena saat Anda membuat pola acak, Anda harus mengunjungi semua jenis tempat – bahkan di interior. Untuk menjaga kesucian metode ini, surveyor harus mencakup sampel yang dibuang.
Tentu saja, permasalahan yang ada dalam jajak pendapat ini adalah baik pihak yang melakukan survei maupun pihak yang ingin bekerja sama dengan lembaga survei ingin agar survei dilakukan dengan biaya rendah. Hal ini menyebabkan adanya kompromi dalam cara melakukan survei. Itu sebabnya ada beberapa kesalahan. Harus ada transparansi mengenai siapa yang mendanai survei ini. Masyarakat yang melakukan exit poll atau survei harus siap menjawab bagaimana mereka mendanai kegiatan tersebut, karena mereka tidak dapat menghindari pertanyaan-pertanyaan ini.
Tentang menilai keandalan exit poll
Dalam beberapa tahun terakhir, perlombaan yang dilakukan adalah melakukan survei terbesar dengan jutaan sampel. Menurut saya ukuran sampel tidak sama pentingnya dengan keterwakilan. Pengambilan sampel secara acak sangat penting untuk hal ini. Terkait dengan penilaian reliabilitas survei, yang pertama adalah penilaian oatshare. Jika perkiraan oatshare Anda salah besar, kami mempunyai banyak alasan untuk mengatakan bahwa survei tersebut salah. Namun, bahkan dengan perkiraan pembagian suara yang benar, perkiraan pembagian kursi bisa saja salah. Karena India menganut kebijakan ‘first past the post’. Masalahnya adalah saluran-saluran berita tidak puas hanya dengan pembagian suara – mereka juga menginginkan jumlah kursi dan kursi yang spesifik. Hal itulah yang membuat penonton tertarik pada pertunjukan tersebut.
Apa yang salah?
Masih ada dua jenis masalah yang bisa muncul. Meskipun ‘model ayunan’ yang kita gunakan dapat memberikan rentang kursi yang luas, hal ini mungkin tidak akurat jika satu partai memenangkan sejumlah besar kursi dengan margin suara yang kecil. Namun lebih banyak lagi responden yang menolak menjawab pertanyaan pemungutan suara. Lembaga survei harus mempertimbangkan angka ini. Permasalahan lainnya adalah meskipun sampel acak mungkin mewakili populasi, sampel tersebut mungkin tidak berbeda dengan perilaku memilih yang sebenarnya dari populasi. Hasil pemilu bisa berbeda-beda tergantung komunitas mana yang memberikan suaranya, dan berapa jumlahnya. Namun, jumlah pemilih yang berbeda-beda membuat sampel lembaga survei tidak representatif. Anda juga harus menghitung margin kesalahan. Untuk jajak pendapat kami, dengan ukuran sampel 19.662, kami menghitung margin kesalahan sebesar 3,08 persen dari perolehan suara.
Menurut saya, terlihat lucu jika lembaga survei memberikan jumlah kursi yang banyak. Jika margin Anda katakanlah 280 hingga 360 suara, ujian sebenarnya dari jajak pendapat Anda adalah seberapa berbedanya hasil sebenarnya dari titik tengah rentang Anda. Namun saat ini banyak yang mencari kemudahan – neiche wale se match kar liya toh humara pol achcha (Jika polling kami cocok dengan batas bawah, lebih baik).