Penelitian Evaluasi (Evaluation Research) Bagian 3/4
Tahap 2. Pengembangan Pertanyaan Kunci
Apa pertanyaan evaluasi yang harus terjawab?
Secara umum, pertanyaan kunci akan dikembangkan terkait dengan pelaksanaan program itu sendiri dan juga dampak program yang terjadi.
Contoh pertanyaan kunci terkait dengan pelaksanaan program:
Konteks Program
- Dimanakah program akan dilaksanakan? Siapa target penerima manfaatnya yang spesifik? Apa prasyarat dan kriteria penetapannya?
- Apa karakterisitik masing-masing area/kelompok target yang mempengaruhi pelaksanaan program? Isu apa yang menjadi batasan pelaksanaan program?
- Bagaimana kondisi awal sebelum program berlangsung?
- Siapa saja yang terlibat?
Pelaksanaan Program
- Apa bentuk manual operasional pelaksanaan program? Bagaimana prosedur pelaksanaan program?
- Bagaimana model dan mekanisme multipihak yang dibangun?
- Bagaimana bentuk dukungan program yang diberikan? Kepada siapa?
- Bagaimana peta partisipasi para pihak? Bagaimana cara mendorong partisipasi tersebut terjadi?
Akses Program
- Adalah prosedur tata kelola yang mengatus khusus tentang akses atas program?
- Apakah program tepat sasaran?
- Apakah program memberikan akses yang setara kepada kelompok penerima manfaat potensial?
Sedangkan contoh pertanyaan kunci terkait dengan capaian dampak program, paling tidak akan menguji pengaruh program atas perubahan yang terjadi pada tingkat sistem dan kebijakan, penerima manfaat, non-penerima manfaat, dan bidang-bidang yang terkait.
Tahap 3. Penyusunan Desain Evaluasi
Rancangan evaluasi seperti apa yang mampu memberikan data yang dibutuhkan?
Terdapat cukup banyak pilihan desain yang telah dikembangkan. Kombinasi antara beberapa desain juga mungkin saja dilakukan. Di bawah ini adalah beberapa contoh desain evaluasi yang dapat menjadin pilihan:
Rancangan Evaluasi |
Intervensi Pemilihan |
Jenis Kendali |
Strategi Pengumpulan Data |
Eksperimental | Pemilihan acak atas kelompok penerima manfaat dan kelompok non-penerima manfaat | Anggota kedua kelompok dapat dipilih secara bebas dan setara dengan jumlah pembandingan yang sama | Pengumpulan data sebelum, dalam pelaksanaan, dan setelah program berakhir |
Kuasi Ekperimental:Perbandingan | Pemilihan khusus pada area, kelompok tertentu | Perbandingan antara kelompok penerima manfaat dan kelompok non-penerima manfaat pada area, kelompok tertentu yang telah ditetapkan | Pengumpulan data sebelum dan setelah program berakhir |
Kuasi Eksperimental:Statistika | Responden tidak dipilih berdasarkan kelompok tertentu | Perbandingan antara penerima manfaat dan non-penerima manfaat sesuai hasil pemilihan acak | Pengumpulan data sebelum dan setelah program berakhir |
Acak Tunggal | Responden tidak dipilih berdasarkan kelompok tertentu | Bebas acak | Pengumpulan data sebelum dan setelah program berakhir |
Acak Serial | Responden tidak dipilih berdasarkan kelompok tertentu | Bebas acak | Pengumpulan data secara berulang sebelum dan setelah program berakhir |
Studi Kasus | Pemilihan khusus secara individu atau kelompok kecil khusus | Bebas acak pada target khusus | Pengumpulan data secara berulang |