Mengukur dampak beasiswa membutuhkan lebih dari daftar penerima

Jumlah mahasiswa yang memperoleh bantuan menjelaskan siapa yang dijangkau program. Jumlah itu belum memisahkan perubahan yang disebabkan bantuan dari keberhasilan yang mungkin terjadi tanpa bantuan. Inilah alasan cakupan dan dampak perlu dinilai sebagai pertanyaan berbeda.

Susan M. Dynarski meneliti hubungan bantuan mahasiswa dan pendidikan dalam naskah kerja NBER tahun 1999, Does Aid Matter? Ia memanfaatkan penghapusan program bantuan mahasiswa Social Security Amerika Serikat pada 1982 sebagai perubahan kebijakan yang memengaruhi sebagian calon mahasiswa. Kematian orang tua dipakai sebagai proksi status sasaran untuk membandingkan perubahan partisipasi serta lama pendidikan.

Rancangan itu menemukan pengaruh bantuan dalam konteks yang diteliti. Namun proksi dan asumsi pembanding tetap merupakan bagian penting penafsiran. Nilai bantuan, biaya kuliah dan lingkungan pendidikan historis Amerika Serikat tidak dapat dipindahkan menjadi persentase dampak suatu beasiswa Indonesia.

Dalam ilustrasi rekaan, program membiayai mahasiswa yang semula hampir pasti melanjutkan kuliah dan mahasiswa yang sebelumnya terancam berhenti. Keduanya layak tercatat sebagai penerima, tetapi pertanyaan tentang perubahan kesempatan membutuhkan informasi awal yang berbeda. Data pribadi tidak perlu diumumkan untuk menyusun laporan agregat.

Evaluasi dapat mengikuti pembayaran, pemahaman syarat, keberlanjutan semester dan penyelesaian studi. Pembanding harus dipilih dengan alasan yang dapat dijelaskan. Dengan begitu, penilaian bergerak dari banyaknya bantuan yang disalurkan menuju apa yang berubah dalam kesempatan pendidikan.