Gambar 19.

4 didasarkan pada data dari validasi pertama menggunakan desain

posttest only perhatikan kesamaan antara gambar ini dabn gambar 19.2 yang
menunjukkan hasil studi pret-posttes satu kelompok

Gambar 19.4 Data dari studi kelompok control posttest-only

Memvalidasi format menajerial desain sampel bahan yang setara

Desain ini sangat berguna untuk menetapkan efek format manajemen. Tidak ada
kelompok kontrol yang diperlukan karena setiap pelajar berfungsi sebagai kontrolnya
sendiri. Pada awal pembelajaran, sejumlah unit setara bahan ajar dirakit. Unit digunakan
secara alternatif dengan dua strategi yang berbeda. Misalnya, unit ganjil dapat disertai
dengan tujuan perilaku, dan unit genap dapat digunakan tanpanya. Atau, setiap unit lain
dapat mengizinkan pengujian berulang sementara yang lain hanya mengizinkan satu
pengujian.
 Gambar 19.5 didasarkan pada data dari delapan arahan yang setara. Empat berisi
kumpulan tujuan perilaku tertentu, empat lainnya tidak. Perhatikan hasil yang jelas lebih
efektif dari format pengujian ulang. Perlu juga dicatat, bagaimanapun, bahwa desain
bahan ekuivalen berkurang kegunaanya karena jumlah bahan ekuivalen meningkat karena
fungsi design tanpa kelompok kontrol dan sampel yang sama menerima aplikasi berulang
dari bahan ekuivalen, untuk belajar, perangkat pembelajaran dan pembelajaran
akumulatif dapat bekerja untuk mengurangi variasi antar-materi kea rah siklus yang
panjang. Dengan demikian, delapan perlakuan ekuivalen yang diukur pada gambar 19.5
mungkin bukan merupakan aplikasi desain yang bijaksana.

Gambar 19.5 Data dari studi sampel bahan yang setara

Validasi Pembayaran 1 Deret waktu

 Validasi hasil melibatkan pengukuran dampak akhir dari materi instruksional
pada anak-anak luar biasa dari pada perubahan langsung dalam perilaku guru. Dalam
desain deret waktu yang diilustrasikan, kelas anak-anak luar biasa yang diinstruksikan
oleh guru atau peserta pelatihan tertentu diberikan serangkaian tes berkala (misalnya, tes
aritmatika mingguan). Tes ini dimulai jauh sebelum peserta pelatihan guru menemukan
materi instruksional dan berlanjut setelah materi selesai. Pengaruh keterampilan dan
pengetahuan yang baru diperoleh di asumsikan tercermin dalam penampilan anak-anak
dalam rangkaian tes selanjutnya.

Gambar 19.6 berdasarkan data dari tujuh anak EMR yang diajar oleh guru yang
sama. Guru bekerja melalui paket instruksional pada pengajaran preskriptif aritmatika
setelah tiga tes pertama. Perhatikan pengurangan umum dalam jumlah kesalahan yang
dibuat oleh anak-anak dalam tes berikutnya, yang merupakan beberapa bukti bahwa usia
paket instruksional berdampak pada penampilan anak-anak.
 Gambar 19.6 Data dari studi deret waktu

Validasi pembayaran 2 desain sampel waktu yang setara

Desain “on-and-off” ini mirip dengan desain sampel bahan yang dipinjamkan
yang setara yang dibahas sebelumnya. Desain ini berguna untuk memeriksa validasi hasil
dari paket instruksional setelah peserta pelatihan guru memperoleh beberapa teknik
pengajaran baru. Peserta pelatihan diinstruksikan untuk mengajar selama periode waktu
yang setara (misalnya, seminggu) secara alternatife dan tidak menggunakan teknik
pengajaran baru. Peserta pelatihan juga memberikan posttest di akhir setiap periode
waktu. Pada topik yang dibahas selama periode itu.
 Gambar 19.7 berdasarkan data dari okay dan cielsa (1972) , menunjukkan
bagaimana penggunaan keterampilan dari modul yang disebut teaching for mastery
membuat perbedaan dalam kinerja 29 siswa di kelas enam.

Gambar 19.7 Data dari studi sampel waktu yang setara

Desain subjek tunggal

Sejumlah desain subjek tunggal yang berguna juga telah dikembangkan terutama
untuk studi modifikasi perilaku. Mereka belum banyak menerapkan evaluasi bahan ajar.
Namun, tampaknya ada potensi besar dalam pemanfaatan desain subjek tunggal dalam
evaluasi program pembelajaran. Sebuah tinjauan yang berguna dari desain subjek tunggal
utama dapat ditemukan di bab Wolf dan Risley, “Penguatan : penelitian Terapan” (1971).

Sumber informasi evaluasi tambahan terancam dalam bibliografi yang dipilih di akhir
bab ini dan juga dalam bibliografi tentang tes dan konstruksi tes di akhir bab 7.

Membangun dan mengumpulkan tes

Jenis tes yang digunakan untuk validasi dapat diklasifikasikan sebagai ukuran
input, proses, dan output. Langkah-langkah input memeriksa perilaku masuk dan
karakteristik peserta pelatihan guru sebelum mereka menerima instruksi. Langkah-
langkah ini membantu menjawab pertanyaan seperti, "Berapa banyak keterampilan yang
sudah dimiliki peserta pelatihan?" "Dalam hal apa peserta pelatihan ini berbeda dari
populasi target untuk materi?" dan "Bagaimana preferensi peserta pelatihan berinteraksi
dengan tingkat di mana mereka belajar dari materi?"

Langkah-langkah proses melacak peristiwa-peristiwa selama periode di mana

peserta pelatihan guru bekerja melalui materi instruksional. Mereka membantu menjawab
pertanyaan seperti, "Berapa lama peserta pelatihan dapat mengerjakan materi tanpa
kelelahan" dan "Masalah utama apa yang dihadapi peserta pelatihan dalam menggunakan
materi?

Langkah-langkah keluaran menguji prestasi peserta pelatihan setelah instruksi.

Mereka membantu menjawab pertanyaan tentang perubahan perilaku, pengetahuan, dan
sikapnya. Berikut adalah deskripsi singkat tentang tes spesifik dari setiap kategori

Langkah-langkah masukan

Tes bakat. Tes-tes ini, biasanya dibakukan, mengukur bakat peserta pelatihan
guru yang berhubungan dengan keterampilan yang akan dipelajari. Tes bakat pada
pemahaman mendengarkan, misalnya, dapat diberikan kepada peserta pelatihan sebelum
ia menjalani modul pelatihan tentang reaksi yang tepat terhadap pertanyaan anak-anak,
jika pengembang percaya bahwa keterampilan tersebut terkait dengan bakat. Penggunaan
tes bakat memungkinkan identifikasi karakteristik mereka: peserta pelatihan yang paling
diuntungkan dari bahan ajar.

Kuisioner masuk. Informasi berbagai aspek pendidikan dan pengalaman

dikumpulkan dari peserta pelatihan melalui kuesioner. Pengalaman mengajar
sebelumnya, termasuk jumlah tahun dan jenis anak yang diajar, merupakan contoh
pengumpulan data yang relevan.

Tes masuk. Teh yang direferensikan kriteria ini memastikan keterampilan dan
pengetahuan prasyarat yang diperlukan untuk penggunaan bahan ajar yang efektif. Dalam
Bab 7, rincian yang dibahas tentang membangun tes semacam itu dari pernyataan
perilaku masuk. Tes masuk yang ideal membantu pelatih untuk mendiagnosis kekurangan
yang tepat dan meresepkan instruksi perbaikan yang sesuai.

Tes awal. Juga tes referensi kriteria yang dibuat oleh pengembang, pretest
dirancang untuk mengukur sejauh mana peserta pelatihan guru telah mencapai tujuan
materi instruksional.

Langkah-langkah Proses

Laporan diri dan sistem observasi. Respon frame-by-frame dari seorang siswa
yang maju melalui unit instruksional terprogram adalah contoh dari proses data. Perilaku
belajar peserta pelatihan juga dapat diamati dengan sistem pengkodean yang sesuai.
Dalam permainan instruksional, misalnya, tingkat keterlibatan setiap peserta pelatihan
dapat diamati dan direkam. Selain itu, peserta pelatihan dapat diminta secara berkala
untuk memeriksa item yang relevan pada daftar periksa laporan diri yang
menggambarkan perasaan dan reaksi mereka terhadap materi.

Langkah-langkah keluaran
Tes akhir. Bentuk paralel dari pretest, post test diambil oleh peserta pelatihan setelah
menyelesaikan materi pelajaran. Ini dibangun oleh pengembang dan didasarkan pada
tujuan bahan ajar. Perbandingan kinerja pretest dan posttest membantu dalam mengukur
keuntungan dalam prestasi peserta pelatihan.

Tes transfer dan sistem observasi. Tes kinerja ini paling sering mengharuskan peserta
pelatihan untuk mengajar di kelas yang sebenarnya. Daftar periksa atau sistem observasi
yang sesuai dapat digunakan secara diam-diam untuk mengukur sejauh mana peserta
pelatihan menerapkan keterampilan dan pengetahuannya pada situasi kelas.

Langkah-langkah sikap. Selain mengajarkan keterampilan dan pengetahuan baru

kepada peserta pelatihan, materi instruksional mungkin sangat penting dalam mengubah
sikapnya. Konstruksi skala dan kuesioner yang dapat digunakan pengembang untuk
mengukur perubahan ini dibahas dalam bab tentang evaluasi formatif Lion. Jenis
instrumen yang sama juga dapat digunakan untuk tujuan sumatif.

Melakukan uji validasi

Pilihan populasi peserta pelatihan guru untuk evaluasi sumatif tergantung pada
kebutuhan dan ketersediaan. Desain evaluasi tertentu juga menentukan bagaimana mata
pelajaran harus dipilih dan ditugaskan ke berbagai kelompok. Proyek yang didanai
pemerintah federal diharuskan mematuhi peraturan pemerintah tentang penggunaan
subjek manusia. Publikasi. Panduan kelembagaan untuk kebijakan DHEW tentang
perlindungan subyek manusia (1971), menguraikan peraturan ini.

Dalam pemilihan mata pelajaran, informasi yang relevan tentang mereka, seperti
10. prestasi, dan nilai rata-rata, seringkali dapat diperoleh dari catatan lembaga publik.
Jika prates sangat penting untuk desain, waktu yang cukup harus diberikan untuk
menjadwalkan tes setelah pemilihan mata pelajaran dan sebelum peserta pelatihan guru
melalui materi instruksional. Selama instruksi, langkah-langkah yang diperlukan harus
diambil untuk memastikan kepatuhan terhadap strategi penggunaan yang ditetapkan
dalam manual guru. Setelah instruksi, posttesting dapat segera atau dapat ditunda untuk
jangka waktu tertentu, tergantung pada fase validasi. Dalam kedua acara, posttesting
biasanya lebih kompleks daripada pretesting.

Menganalisis data

Sangat disarankan agar pengembang instruksional berkonsultasi dengan ahli

pengukuran dan analisis data sedini mungkin dalam tahap perencanaan studi validasi.
Konsultasi awal seringkali dapat menghindari penundaan yang mahal dan analisis data
post hoc. Analis data biasanya lebih membantu dan kooperatif ketika diberi kesempatan
untuk membantu dalam rencana pengolahan data sebelum pengumpulan data.
 Setelah pengujian validasi, berbagai instrumen dinilai, diberi kode, dipindahkan
ke kartu komputer, dan dianalisis sesuai dengan prosedur yang telah dirancang
sebelumnya. Jika langkah-langkah pengendalian kualitas telah dilakukan dengan hati-hati
selama tahap evaluasi formatif, data tidak akan mungkin menunjukkan bahwa bahan
instruksional sama sekali tidak dapat diandalkan atau tidak efektif. Namun, beberapa
kelemahan yang tidak terduga, yang menunjukkan bahwa materi belum siap untuk
disebarluaskan dalam skala besar dapat ditemukan. Dalam hal ini, hasil dari pengujian
validasi harus dianalisis untuk memberikan umpan balik formatif tambahan, dan
modifikasi yang sesuai harus dilakukan. Kecuali jika revisi ini kecil, evaluasi sumatif
harus dilakukan.