12

Pengukuran

'Tindakan produktivitas seperti statistik kecelakaan:

mereka memberitahu Anda semua tentang jumlah
kecelakaan di rumah, di jalan, dan di tempat kerja, tetapi
mereka tidak memberitahu Anda bagaimana untuk
mengurangi frekuensi kecelakaan.'
W Edwards Deming, Keluar dari Krisis

Salah satu alasan untuk mengembangkan proses peningkatan kualitas

adalah untuk membangun sebuah sekolah yang sukses dan pada
gilirannya untuk menyediakan siswa dengan tingkat kemungkinan
terbesar kesuksesan. Sebagai pernyataan misi ini adalah sesuatu yang
kita semua dapat berlangganan, tapi masalah adalah bagaimana kita
bisa terbaik melakukan ini? Faktor-faktor apa membuat lembaga
pendidikan yang sukses dan bagaimana mungkin faktor-faktor ini
dihubungkan dengan indikator terukur keberhasilan? Ide pengukuran
kinerja di sini adalah penting karena melalui pengukuran yang kita
mampu menganalisis efektivitas proses peningkatan kualitas dan
melalui pengukuran bahwa kita mampu menunjukkan akuntabilitas
lembaga kami untuk penggunaan sumber daya publik.

Mengapa mengukur kualitas pendidikan?

pengukuran kinerja dan pemantauan kualitas adalah tema penting
dalam literatur manajemen kualitas total, akan jantung karya asli dari
Walter Stewhart dan W Edwards Deming. gagasan inovatif mereka
menggunakan alat pengendalian proses statistik untuk mengukur dan
kemudian untuk menghilangkan variabilitas dalam proses manufaktur
dan output telah disesuaikan dan diterapkan dalam konteks sosial.
Mereka adalah alat yang kuat dan dapat memiliki dampak besar pada
memanfaatkan up kualitas.
Namun, sangat penting bahwa kendali alat ukur ini adalah di tangan
para praktisi, dan sebaiknya dikembangkan oleh mereka. Mereka
tidak harus dipaksakan pada mereka oleh lembaga-lembaga luar. Apa
yang mengukur kualitas ment tidak harus menjadi adalah latihan
memaksakan target yang ditetapkan secara eksternal pada lembaga-
lembaga. Hal ini tidak hanya menghilangkan lembaga kepemilikan
sarana yang perbaikan, tetapi juga memaksa pada itu rezim
pemeriksaan eksternal yang dapat menyebabkan rasa takut dan stres.
Setelah semua, Deming titik 11-nya yang terkenal 14 adalah
'menghilangkan standar kerja yang meresepkan kuota numerik'.
Sementara ini ditulis untuk pengaturan industri, ia memiliki kekuatan
yang sama dan resonansi dalam konteks pendidikan. Dia tidak percaya
bahwa kualitas dapat diukur semata-mata pada output dari sebuah
proses. Dia juga berpendapat bahwa bekerja untuk kuota numerik dan
target mengarah ke sudut pemotongan dan pengurangan keseluruhan
kualitas. Hal ini berlaku dalam pendidikan.
Sarana yang berkualitas meningkat tidak dapat direduksi menjadi
masalah teknis belaka menginstal alat statistik yang dirancang di
tempat lain (meskipun ini tidak berarti bahwa dalam kepentingan ide-
ide bagus benchmarking orang lain tidak boleh digunakan). Sebaliknya
terserah praktisi sendiri, biasanya bekerja dalam tim, untuk merancang
alat pengukuran yang memungkinkan mereka untuk memantau target
yang mereka sendiri telah ditetapkan. Dalam rangka untuk melakukan
hal ini alat harus situasi tertentu, dan pemantauan setiap harus
memastikan bahwa tidak hanya hal-hal diukur benar, tapi itu hal yang
benar diukur, dan bahwa kesimpulan yang benar diambil dari data.
Pengukuran memiliki tujuan akhir yang mengidentifikasi
kemampuan untuk mengurangi variasi. Hal ini untuk memisahkan
sebenarnya dari dimaksudkan. Dalam rangka untuk mengurangi variasi
kita harus akurat menemukan penyebab variasi. Kita perlu tahu
mengapa tingkat tertentu variasi ada. Jika kita tidak mengerti mengapa,
kita berada dalam bahaya penyalahgunaan data, dan bukannya
membuat perbaikan kita dapat menurunkan motivasi tim atau individu
atau membuat keadaan menjadi lebih buruk.
Barlosky dan Lawton dalam buku mereka Mengembangkan Sekolah
Kualitas (1995) menarik perhatian kebutuhan untuk memastikan bahwa
kita tidak bingung penyebab umum dari variasi dengan penyebab
khusus ketika melakukan pengukuran pendidikan. Biasanya penyebab
umum adalah tentang proses dan struktur organisasi. penyebab khusus
berhubungan dengan perbedaan individu, perilaku dan kemampuan.
Sebagai contoh, penurunan yang signifikan dalam tingkat lulus
pemeriksaan untuk kelompok mungkin menunjukkan kegagalan teknik
mengajar (penyebab umum). Namun, jika setelah analisis lebih lanjut
kita menemukan bahwa masalah ini terkait dengan penyakit jangka
panjang dari sejumlah siswa (penyebab khusus) maka tindakan
manajemen yang dibutuhkan akan bersifat sangat berbeda.
 Perlu merefleksikan tindakan fakta bahwa Deming percaya bahwa 95
persen dari semua variasi disebabkan oleh umum daripada penyebab
khusus. Angka ini mungkin mengurangi secara signifikan dalam
pengaturan sosial, seperti yang dalam proses belajar mengajar. Hal ini
menunjukkan bahwa perubahan sistem adalah kunci untuk mengurangi
variasi. Jika kita menemukan kausalitas dalam sistem bukan di individu
maka kita tidak hanya mengakhiri budaya menyalahkan tapi kami juga
dalam perjalanan ke membuat perbaikan kualitas yang signifikan.
Sebagai Victor Dingus, mantan manajer benchmarking untuk atau
Eastman Chemical Company di Amerika Serikat, dikutip Barlosky dan
Lawton (1995), mengatakan:

Faktanya adalah bahwa sebagian besar masalah (95%

mengatakan Deming) terletak pada sistem. Orang-orang selalu
melakukan apa yang masuk akal bagi mereka. Sistem ini harus
diubah. Jangan menyalahkan orang-orang untuk sistem.

Untuk dapat mengidentifikasi penyebab umum dan spesifik variasi kita

perlu mengumpulkan data, dan data yang kami kumpulkan harus
signifikan dan berguna. Terlalu sering kita mengumpulkan data mati,
yaitu, data yang tujuan itu sendiri daripada data yang benar-benar
berguna. Kita perlu selalu bertanya kepada diri sendiri pertanyaan
'Bagaimana data ini akan digunakan dan mengapa kita mengumpulkan
itu?' Ketika kita mengumpulkan data penting untuk:

• jelas apa yang kita ukur;

• tahu mengapa kita mengukurnya;
• memahami apa data dapat memberitahu kami;
• tahu apa yang bisa kita lakukan dengan data;
• memiliki gagasan yang jelas tentang bagaimana data dapat
digunakan sebagai dasar peningkatan kualitas.

Mengapa nilai tambah?

Banyak dari data yang dikumpulkan dalam pendidikan adalah tentang
kinerja siswa. Artinya hasil mereka di tes dan ujian atau tindakan lain
yang diakui keberhasilan dan prestasi seperti perkembangan penelitian
lebih lanjut atau sukses dalam mengamankan jenis tertentu pekerjaan.
Di wajah itu, indikator kinerja ini memberitahu kita seberapa baik
siswa mencapai dan, karena itu, oleh proxy seberapa baik sekolah,
perguruan tinggi atau universitas yang berhasil. indikator kinerja
tersebut telah dilembagakan dalam banyak sistem pendidikan,
khususnya di Inggris di mana sekolah dan tabel liga universitas yang
resmi dihasilkan untuk setiap lembaga dan diterbitkan dalam pers
nasional dan lokal. Namun, ketika kita melihat data di balik meja liga
kita menemukan bahwa mereka memberitahu kita kurang dari
umumnya diakui.
Apa tabel liga berbasis hasil tidak memberi tahu kami adalah tentang
seberapa baik sebuah lembaga yang melakukan oleh mahasiswa. Hal
ini karena hanya mengukur hasil. Ini hanya memberitahu kita tentang
kinerja siswa dan bukan lembaga. Ini tidak mengukur guru atau kualitas
lembaga. Yang paling ekstrim, sebuah tabel liga mungkin
mencerminkan tidak lebih dari fakta bahwa lembaga menarik siswa
sangat mampu dan mampu dan menghindari menempatkan hambatan di
jalan mereka. indikator kinerja keluaran seperti juga memiliki
konsekuensi potensi mendorong lembaga untuk memilih yang terbaik
dan menolak sisanya. Ini berarti bahwa 'sukses' sekolah, karena mereka
memilih yang terbaik, menarik yang terbaik, sedangkan yang lebih
bawah tabel liga menjadi terkait dengan kegagalan dan tidak dapat
menarik siswa mampu mereka butuhkan untuk memanjat meja.
Hal ini tidak mengherankan bahwa banyak pendidik mencari yang
berbeda dari indikator kinerja untuk mengukur keberhasilan
kelembagaan, salah satu yang mengukur kontribusi khusus yang dibuat
oleh lembaga. Ini berarti bahwa lembaga akan mampu mengukur
keberhasilan pada untuk-seperti dasar seperti-terlepas dari profil, latar
belakang sosial dan kaliber siswa mereka.
Sebuah bentuk yang lebih berguna dari data yang akan memberitahu
kita seberapa banyak siswa manfaat dari belajar di lembaga tertentu. Ini
akan menjadi ukuran jarak setiap siswa telah melakukan perjalanan. Ini
akan mengukur kualitas kelembagaan, bukan prestasi siswa. Akan lebih
adil untuk lembaga yang menarik siswa kurang mampu namun berhasil
menambah nilai yang signifikan untuk belajar mereka.
Bentuk indikator kinerja dikenal sebagai ukuran nilai tambah. Bukti
untuk nilai tambah hanyalah perbedaan antara kinerja siswa pada entri
dan kinerja mereka setelah selesainya program mereka. tabel liga nilai
tambah tabulasi perbedaan, bukan jumlah output. Mereka dibangun
dengan menggunakan data masa lalu untuk menetapkan target untuk
setiap siswa memasuki lembaga. Target ini merupakan pencapaian rata-
rata semua siswa dengan kualifikasi entri yang sama seperti peserta.
Harus semua peserta untuk lembaga mencapai target individu mereka
sendiri, lembaga tersebut akan diberikan nilai-tambah nilai indeks 100.
Jika siswa lembaga di bawah-mencapai rata-rata mereka akan
menerima nilai indeks nilai tambah kurang dari 100, dan jika mereka
over-mencapai rata-rata mereka menerima skor nilai tambah lebih dari
100.
menjadi antara 98 dan 102. tabel Liga berdasarkan indeks nilai tambah tersebut dapat
memberikan peringkat yang sangat berbeda dari tabel kinerja berbasis hasil.
langkah-langkah nilai tambah dapat digunakan untuk mendukung pembelajaran siswa
dan bukan hanya sebagai pengukuran kualitas. Satu masalah tersembunyi dalam
pendidikan adalah siswa-the berkinerja orang yang memiliki kualifikasi entri yang sangat
baik tetapi yang meninggalkan dengan kualifikasi rata-rata. Pada tabel kinerja biasa rata-
rata kinerja ini diletakkan setara dengan siswa yang lemah yang masuk dengan kualifikasi
miskin tetapi melalui kerja keras dan perawatan staf menghasilkan kinerja rata-rata.
Dengan menggunakan pendekatan nilai tambah dan memberikan siswa dengan target
berdasarkan data masa lalu adalah mungkin untuk plot kemajuan siswa dan untuk
mengambil tindakan korektif jika seorang siswa di bawah-mencapai. langkah-langkah
nilai tambah kemudian dapat digunakan sebagai sarana peningkatan kualitas dan tidak
hanya sebagai indikator kinerja.
Nilai ditambahkan:

• adalah perbedaan antara kinerja siswa pada entri dan kinerja mereka pada
penyelesaian program mereka;
• adalah ukuran jarak yang ditempuh, bukan hasil;
• lembaga imbalan yang secara konsisten melakukan dengan baik oleh siswa mereka
terlepas dari kemampuan siswa mereka;
• dapat digunakan sebagai alat tutorial dan sebagai sarana penetapan target mahasiswa;
• liga tabel nilai tambah dapat memberikan peringkat yang sangat berbeda dari orang-
orang yang peringkat hanya pada hasil.