Ringkasan dokumen tersebut dalam 3 kalimat:
Dokumen tersebut membahas tentang penilaian program berdasarkan model logik, termasuk definisi penilaian program, perbandingan antara penilaian program dan penelitian pendidikan, komponen model logik, dan langkah-langkah menjalankan penilaian program berdasarkan model logik. Model logik digunakan untuk menghubungkan input, aktivitas, output, outcome, dan dampak suatu program. Langkah-langkah penilaian program meliputi
2. 1
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
DEFINISI PENILAIAN PROGRAM
Stufflebeam (1983) menyatakan, “The purpose of evaluation is to improve, not prove.”
Penilaian program merupakan suatu kemestian bagi sesebuah organisasi untuk melihat
kebaikan dan kelemahan sesuatu program yang dilaksanakan (Kamaruzaman Moidunny,
2015). Tuckman (1985) pula menyatakan bahawa tujuan penilaian sesuatu program
pendidikan adalah untuk memastikan program mencapai matlamat. Oleh itu, penyelidikan
berkaitan dengan penilaian program atau evaluation research merupakan proses yang
sistematik bagi mengumpul dan menganalisis data-data untuk tujuan membuat keputusan
sama ada sesuatu program berkaitan yang sedang dilaksanakan, atau yang telah selesai
dijalankan memberi kesan yang menguntungkan atau sebaliknya.
Oleh itu matlamat utama penilaian program adalah untuk menilai program dan melihat
sejauhmana sesuatu program itu berjaya seterusnya dapat menyumbang kepada
penambahbaikannya. Penilaian yang bersistematik perlulah mengambil kira perkara-perkara
berikut;
i. menentukan matlamat, objektif dan tujuan suatu program itu dinilai
ii. menentukan kaedah yang digunakan agar persoalan terhadap program yang dinilai itu
dapat dijawab dan diketahui
iii. membuat keputusan yang berguna berdasarkan hasil laporan. Hasil laporan tersebut
dapat digunakan untuk membuat keputusan dan penambahbaikan
3. 2
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
PERBANDINGAN ANTARA PENILAIAN PROGRAM DAN PENYELIDIKAN
PENDIDIKAN.
Penyelidikan pendidikan dan penilaian program sering tersilap antara satu sama lain. Hal ini
kerana kaedah dalam penilaian program adalah sama dengan penyelidikan pendidikan
kerana keduanya memerlukan pemilihan reka bentuk penyelidikan yang sesuai, merangka
kaedah yang betul untuk pengumpulan data, dan menganalisis data tersebut dengan betul.
Bagaimanapun adalah penting untuk membezakan antara kedua-dua disiplin penilaian dan
penyelidikan.
Tujuan penilaian adalah pada dasarnya untuk menambahbaik program yang sedia ada
bagi populasi sasaran, manakala penyelidikan bertujuan untuk membuktikan teori atau
hipotesis. Selain itu, penilaian program memberi tumpuan untuk membuat keputusan sama
ada hendak diteruskan, diperbaiki atau dihentikan. Namun berbeza dengan penyelidikan yang
hanya bermatlamat mencari pengetahuan atau pemahaman yang baharu dalam sesuatu topik
atau bidang. Seterusnya penyelidikan mungkin tiada keperluan atau pemintaan yang tinggi
bagi data yang diperoleh dalam kajian yang dibuat. Namun hal ini berbeza pula dengan
penilaian program, yang mana data yang dihasilkan sangat dinantikan oleh pembuat
keputusan dan individu yang terlibat. Di samping itu, matlamat penyelidikan pendidikan adalah
untuk menghasilkan pengetahuan yang boleh digeneralisasikan, manakala maklumat
daripada penilaian program hanya diperlukan khusus untuk sesebuah program tertentu.
4. 3
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
MODEL LOGIK
Model Logik merupakan salah satu alat yang berasaskan Teori Program yang digunakan
untuk menilai sesebuah program (National Collabating Centre For Aboriginal Health, 2009;
Weiss, 1998; Wilder Research, 2009). Komponen-komponen yang dikemukakan adalah input,
aktiviti, output, outcome dan impak. Model Logik membantu penilai membuat jangkaan
bagaimana sebenarnya sesebuah program itu sepatutnya mencapai matlamat dan sejauh
mana kemunasabahan pencapaian pelaksanaan program itu diperoleh. Dalam bahasa yang
mudah, Model Logik adalah gambaran pencapaian sesebuah program yang dilukis untuk
menunjukkan langkah atau proses berbentuk Peta Alir. Dengan kata lain, Model Logik
merupakan paparan pemikiran secara grafik untuk menyusun maklumat yang menggunakan
pendekatan secara visual dengan memetakan apa yang ada di minda tentang bagaimana
perkara itu dilakukan dan seharusnya dilaksanakan. Model Logik dapat menggambarkan
tindakan yang dirancang dan keputusannya dijangka.
Asas pada Model Logik ini ialah model ini merupakan satu cara atau gambaran yang
bersistematik untuk berkongsi pemahaman hubungan antara sumber-sumber yang ada untuk
program beroperasi, aktiviti yang dirancang dan perubahan atau hasil yang diharapkan untuk
dicapai. Ia menggunakan perkataan atau gambar untuk menggambarkan turutan aktiviti atau
proses yang difikirkan untuk membawa perubahan dan bagaimana aktiviti dapat dikaitkan
dengan hasil program yang diharapkan dijangka untuk dicapai.
5. 4
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
KERANGKA KONSEP PENILAIAN PROGRAM BERASASKAN MODEL LOGIK
Model Logik terdiri daripada komponen Input atau Sumber, Aktiviti, Output, Outcome (hasil
jangka pendek dan hasil jangka sederhana) dan Impak (hasil jangka panjang) seperti yang
ditunjukkan pada Rajah 1.
Rajah 3: Komponen dalam Model Logik. Sumber: W.K. Kellogg Foundation (2004)
6. 5
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
MODEL LOGIK MERUPAKAN ‘ROAD MAP’
Model Logik dipilih untuk menilai program kerana ia menghubungkaitkan input, aktiviti, output
dengan outcome program. Model logik merupakan satu kaedah yang jelas dan sistematik
untuk menunjukkan hubung kait antara sumber yang digunakan untuk melaksanakan sesuatu
program, aktiviti yang dilaksanakan dengan perubahan atau hasil yang diharapkan untuk
dicapai. Ada sesetengah pakar yang manganggap Model Logik merupakan ‘road map’ untuk
melaksanakan atau menilai sesebuah program.
Cara membaca elemen-elemen pada Model Logik adalah dari kiri ke kanan. Model
Logik memaparkan rantai pemikiran yang menggunakan kenyataan “Jika….Maka” untuk
menyambungkan komponen-komponen program. Rajah 2 menunjukkan bagaimana Model
Logik dibaca.
Rajah 2: Cara membaca Model Logik
Adaptasi daripada W.K. Kellogg Foundation, 2004
7. 6
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
TEMPLET ATAU PELAN INDUK BERASASKAN MODEL LOGIK
Templet atau pelan induk yang terhasil berasaskan Model Logik akan membantu pengkaji
untuk mengenal pasti hubungan di antara input, aktiviti, output dan outcome (Spaulding, 2014)
seperti yang ditunjukkan pada Rajah 3.
Input Aktiviti Output Outcome Impak
Apakah yang
perlu ada
untuk
menggerakkan
program?
Apakah yang
perlu
dilakukan
untuk
mencapai
hasil langsung
program?
Apakah hasil
langsung atau
hasil semerta
yang diperoleh
untuk
mencapai
perubahan
yang
disasarkan?
Apakah
perubahan/
kesan yang
diharapkan
untuk dicapai
dalam jangka
masa pendek
(1-3 tahun)
dan jangka
masa panjang
(4-6 tahun)?
Apakah
perubahan
besar yang
dihasratkan
untuk dicapai
dalam tempoh
(7 - 10 tahun)?
Rajah 5: Templet Asas Penilaian Model Logik
Adaptasi daripada W.K Kellogg Foundation Logic Model Development Guide (2004)
8. 7
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
LANGKAH MENJALANKAN KAJIAN PENILAIAN PROGRAM BERASASKAN MODEL LOGIK
Perancangan bagi menjalankan kajian berbentuk penilaian program perlulah dilaksanakan
mengikut prosedur yang jelas. Kajian penilaian program dilakukan sama seperti penyelidikan
pendidikan yang lain. Namun kajian penilaian program perlu berpandukan kepada Model
Penilaian Program yang bersesuaian agar dapat mengenal pasti pencapaian program yang
dinilai dan seterusnya dapat menyumbang kepada penambahbaikannya. Berikut adalah
langkah asas menjalankan kajian penilaian program berasaskan Model Logik.
Langkah 1: Tentukan program yang akan dinilai
Contoh: Program i-THINK
Langkah 2: Tentukan komponen input, aktiviti, output, outcome dan impak program
menggunakan templet Model Logik.
Input Aktiviti Output Outcome Impak
Apakah yang
perlu ada untuk
menggerakkan
program?
Apakah yang
perlu dilakukan
untuk mencapai
hasil langsung
program?
Apakah hasil
langsung atau hasil
semerta yang
diperoleh untuk
mencapai
perubahan yang
disasarkan?
Apakah perubahan/
kesan yang diharapkan
untuk dicapai dalam
jangka masa pendek
(1-3 tahun) dan jangka
masa panjang (4-6
tahun)?
Apakah perubahan
besar yang
dihasratkan untuk
dicapai dalam
tempoh (7 - 10
tahun)?
Pentadbir
Pasukan
Pemandu
Guru
Murid
Bahan
Sokongan
Latihan dan
bimbingan
kepada guru
Latihan dan
bimbingan
kepada
murid
Kekerapan aplikasi
program i-THINK
dalam PdP
Perubahan guru dan
murid dari aspek
Pengetahuan
Sikap
Kemahiran
Aspirasi
Kemahiran berfikir
dapat ditingkatkan
dan dibudayakan
ke arah
menghasilkan
murid berinovatif
9. 8
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
Langkah 3: Bina kerangka konseptual kajian berasaskan Model Logik
Langkah 4: Bina objektif kajian berdasarkan kerangka kajian
Contoh:
Objektif kajian ini adalah untuk;
a) Mengenal pasti tahap input program i-THINK berdasarkan penilaian guru
b) Mengenal pasti tahap aktiviti program i-THINK berdasarkan penilaian guru
c) Mengenal pasti tahap output program i-THINK berdasarkan penilaian guru
d) Mengenal pasti tahap outcome program i-THINK berdasarkan penilaian guru
e) Mengenal pasti tahap impak program i-THINK berdasarkan penilaian guru
Langkah 5: Bina soalan kajian berdasarkan objektif kajian
Contoh:
Berdasarkan objektif kajian yang telah dibentuk, maka kajian ini dijalankan bertujuan untuk
mencari jawapan kepada beberapa persoalan berikut:
a) Apakah tahap input program i-THINK berdasarkan penilaian guru dari aspek;
i. Pentadbir
10. 9
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
ii. pasukan pemandu
iii. guru
iv. murid
v. bahan sokongan
b) Apakah tahap aktiviti program i-THINK berdasarkan penilaian guru dari aspek;
i. Kecukupan latihan dan bimbingan yang diterima guru
ii. Kecukupan latihan dan bimbingan yang diberi kepada murid
c) Apakah tahap output program i-THINK berdasarkan penilaian guru dari aspek
kekerapan aplikasi program i-THINK dalam PdP.
d) Apakah tahap outcome program i-THINK dari aspek:
i. Pengetahuan
ii. Sikap
iii. Kemahiran
iv. Aspirasi
e) Sejauh manakah pencapaian impak program i-THINK
Langkah 6: Bina instrumen kajian berasaskan objektif dan soalan kajian.
Instrumen yang dibangunkan perlulah berasaskan objektif dan soalan kajian dengan
berpandukan kepada reka bentuk kajian yang sesuai. Sebagai contohnya, penilaian program
i-THINK boleh memilih rekabentuk kajian tinjauan hirisan rentas yang menggunakan
instrumen soal selidik. Soal selidik dibangunkan berdasarkan kepada 5 konstruk utama iaitu
konstruk input, aktiviti, output, outcome dan impak. Konstruk input, aktiviti, output dan outcome
mengandungi item-item soal selidik menggunakan skala Likert yang perlu dianalisis secara
kuantitatif. Konstruk impak boleh menggunakan item yang berbentuk soalan terbuka yang
perlu dianalisis secara kualitatif.
11. 10
PENILAIAN PROGRAM | Dr. SHAMSAZILA SA’ABAN
RUJUKAN
Azizi Yahaya, Jamaludin Ramli, & Shahrin Hashim. (2008). Sejaumanakah model stufflebeam
(KIPP) boleh membantu dalam penilaian program pembelajaran ? Isu-Isu Psikologi
Pembangunan Diri, pg 188-209.
Bahagian Pembangunan Kurikulum. (2012a). Nota kursus membudayakan kemahiran berfikir
oleh Kestral Education United Kingdom. Kementerian Pelajaran Malaysia. Retrieved
from http://www.moe.gov.my/bpk
Bahagian Pembangunan Kurikulum. (2012b). Program i-THINK: membudayakan kemahiran
berfikir. Retrieved from http://www.moe.gov.my/bpk
Fitzpatrick, J. L., Sanders, J. R., & Worthen, B. R. (2011). Program evaluation: Alternative
approaches and practical guidelines (4th ed.). (Allyn & Bacon, Ed.). New York: Pearson
Education, Inc.
Grammatikopoulos, V. (2011). Integrating program theory and systems-based procedures in
program evaluation: A dynamic approach to evaluate educational programs. Educational
Research and Evaluation, 18(1), 53–64. http://doi.org/10.1080/13803611.2011.640874
Kellaghan, T., & Stufflebeam, D. L. (2003). International handbook of education evaluation.
Netherland: Kluwer Academic Publishers
Knowlton, L. W., & Phillips, C. C. (2013). Introducing Logic Models. In the Logic Model
guidebook: Better strategies for great results (pp. 2–62).
Lawton, B., Brandon, P. R., Cicchinelli, L., & Kekahio, W. (2014). Logic Models : A tool for
designing and monitoring program evaluations. Washington DC. Retrieved from
https://ies.ed.gov/ncee/edlabs/regions/pacific/pdf/REL_ 2014007.pdf
Metfessel, N., & Michael, W. (1967). A Paradigm involving multiple criterion measures for
the evaluation of the effectiveness of school programs. Educational and Psychological
Measurement, 27, 931-943
Stufflebeam, D. L., & Shinkfield, A. J. (2007). Evaluation theory, models, and applications
(1st Edition). San Francisco: Jossey-Bass A Wiley Brand.
W.K. Kellogg Foundation. (2004). Logic Model development guide. W.K Kellogg Foundation.
Michigan. Retrieved from http://www.wkkf.org/knowledge-
center/resources/2006/02/WK-Kellogg-Foundation-Logic-Model-Development-
Guide.aspx