Penelitian Evaluasi (Evaluation Research) Bagian 4/4
Tahap 4. Penyusunan Instrumen Evaluasi
Instrumen atau teknik seperti apa yang akan digunakan dalam memperoleh data?
Tahapan ini merupakan turunan dari tahapan sebelumnya. Beberapa pilihan teknik evaluasi yang dapat dikombinasikan antara lain:
- Penelitian Literer
- Kelompok Diskusi Terfokus
- Pengamatan Langsung
- Survei
- Wawancara Mendalam
- Analisa atas Laporan dan Dokumentasi
- Analisa atas Hasil/Produk
Beberapa pertimbangan yang harus disertakan dalam memilih teknik evaluasi akan meliputi batasan waktu, batasan sumber daya dan kebutuhan akan tingkat validitas, akurasi, dan pertimbangan konsistensi.
Contoh format matrik kertas kerja evaluasi yang kemudian bisa disusun adalah sebagai berikut:
Tujuan Evaluasi |
Pertanyaan Kunci |
Instrumen/Teknik |
Cara Ukur |
Tujuan 1. | |||
Tujuan 2. |
Masing-masing pilihan teknik akan menentukan instrumen yang harus dibangun. Instrumen tersebut akan meliputi:panduan teknik evaluasi, formulir catatan proses, formulir isian responden (kuisioner), formulir survei, daftar pertanyaan wawancara, serta tabel-tabel pengukuran hasil.
Tahap 5. Pengumpulan Data dan Informasi
Bagaimana data dan informasi dikumpulkan?
Tahapan perancangan dan persiapan evaluasi sudah selesai. Kini dimulai langkah penelitian atas program. Kerja lapangan membutuhkan pemahaman yang menyeluruh atas konsep dan tujuan tahapan-tahapan sebelumnya.
Kegiatan awal yang harus dilakukan adalah pelatihan kolektor data. Beberapa hal yang harus menjadi materi pelatihan data kolektor adalah sebagai berikut:
- Orientasi evaluasi
- Penjelasan detil tentang metode dan teknik evaluasi
- Penjelasan detil tentang penggunaan instrumen evaluasi
- Pengantar atas perilaku yang dibutuhkan evaluator
- Simulasi evaluasi
- Diskusi kelemahan instrumen dan perbaikan
Bagian yang juga menjadi tahapan ini adalah perolehan ijin, surat penugasan dan juga (jika diperlukan) penandatanganan surat-surat pernyataan.
Tahap 6. Analisa Data dan Informasi
Bagaimana data dianalisa, dan bagaimana menghasilkan temuan yang berguna?
Bagian ini akan menjelaskan tahapan analisa data secara umum, yang paling tidak akan mencakup beberapa kegiatan sebagai berikut:
- Pengklasifikasian dan penyimpanan data
- Komputerisasi data
- Analisa data
Analisa data juga dapat menggunakan beberapa tipe analisa. Bagian ini akan memberikan gambaran tipe-tipe analisis, namun tidak menjelaskan detil bagaimana analisa per masing-masing tipe akan dilakukan.
Jenis-jenis analisa data:
- Analisa Kualitatif. Analisa ini akan membaca pola dari kode-kode yang diperoleh dari hasil penelitian, menemukan relasi antar pola dan menginterprestasikannya, dan kemudian menterjemahkan temuan dalam model penjelasan tertentu.
- Analisa Kuantitatif. Analisa ini mendeskripsikan temuan dalam bentuk statistik, bisa dengan atau tanpa memberikan pernyataan atas pola/fenomena yang ditemui.
- Tes Non-Parameter. Analisa akan menjadi dukungan bagi analisa lainnya, ketika rencana evaluasi mengalami hambatan yang signifikan, semisal tidak diperolehmya data. Jenis tes ini, dapat dilakukan dengan metode analisa benchmark, pemeriksaan alur sebab-akibat, dan beberapa teknik analisa lainnya yang bisa dikembangkan sesuai dengan kebutuhan.