ANALISIS ITEM
MPPR 1103
INTRODUCTION TO MEASUREMENT
AND EVALUATION
(DR ADIBAH BINTI ABDUL LATIF)
1 PENGENALAN 2
2 LATAR BELAKANG MASALAH 4
3 PENYATAAN MASALAH 5
4 OBJEKTIF 5
5 METODOLOGI 5
6 ANALISIS 8
6.1 Data Mentah 8
6.2 Statistik Item 10
6.3 Graf Indeks Kesukaran Vs Indeks
Diskriminasi 14
7 PERBINCANGAN 16
8 KESIMPULAN 22
9 RUJUKAN 23
10 LAMPIRAN 24
1
1. PENGENALAN
2
Jadual 1: Standard Kandungan Teknologi Maklumat dan Komunikasi (TMK)
MODUL PENERANGAN
Dunia Komputer Modul ini diperkenalkan kepada murid
i. Memperihal Komputer dan untuk memmuridi bagaimana sebuah
Fungsinya sistem komputer itu berfungsi,
memahami fungsi perisian dan peranti
ii. Mengenal Perisian Komputer
yang terlibat, berupaya memanipulasi
iii. Memahami Peranti Komputer ukuran data, serta mampu menjaga
iv. Memahami Ukuran Data keselamatan data dan komputer.
v. Menjaga Keselamatan Data
dan Komputer
Eksplorasi Multimedia Modul ini diperkenalkan kepada murid
i. Mengkaji Multimedia untuk menunjukkan bagaimana
maklumat dipersembahkan dalam
ii. Menggunakan Aplikasi
bentuk multimedia, membina bahan
Khusus untuk Membangun
multimedia menggunakan aplikasi
Bahan Multimedia
khusus dan membangunkan
iii. Membangun Persembahan persembahan multimedia interaktif tak
iv. Multimedia Interaktif Tak linear
Linear
Sistem Rangkaian dan Dunia Modul ini merangkumi topik rangkaian
Internet dan internet secara teori dan amali.
i. Mengenal Rangkaian Murid akan diberikan pengetahuan
Komputer mengenai rangkaian yang
membolehkan komputer berinteraksi
ii. Memahami Fungsi Peranti
antara satu sama lain, perkhidmatan
Rangkaian Komputer
dalam Internet serta kemahiran
iii. Mengenal Internet membangunkan laman blog.
Dunia Pangkalan Data Modul ini diperkenalkan kepada murid
i. Memahami Data dan untuk mengenali data dan maklumat,
Maklumat memmuridi ciri-ciri pangkalan data dan
jenis data dalam pangkalan data serta
ii. Mengkaji Sistem Pangkalan
membangunkan satu sistem pangkalan
Data
data yang mudah.
iii. Membangunkan Sistem
Pangkalan Data
Pengaturcaraan Modul ini akan melatih murid belajar
i. Memahami Pengaturcaraan menggunakan pemikiran logik dalam
menyelesaikan masalah melalui
ii. Menggunakan Algoritma
penggunaan aplikasi pengaturcaraan.
Melalui Pseudokod dan Carta
Murid juga akan memmuridi proses
Alir
yang terlibat dalam membangunkan
iii. Mengatur cara dan Menguji sesuatu atur cara melalui pendekatan
iv. Menghasilkan Projek pembangunan atur cara yang sistematik
Pengaturcaraan dan mudah.
3
2. LATAR BELAKANG
Menguji ujian bilik darjah (analisis item) adalah satu keperluan sebelum ujian
bilik darjah boleh ditadbir. Ujian bilik darjah harus dinilai bagi memastikan ia dapat
berfungsi dengan berkesan. Gronlund & Linn (1990) telah menghasilkan satu
senarai semak yang boleh digunakan untuk membantu menilai ujian yang dibina:
4
3. PENYATAAN MASALAH
Amalan yang biasa dilakukan setelah sesuatu ujian bilik darjah telah selesai
(penskoran dan perbincangan keputusan) adalah membuang ujian tersebut.
Amalan ini adalah sia-sia memandangkan penyediaannya yang memerlukan
perancangan yang teliti dan kerja keras (Gronlund & Linn, 1990). Guru
mempunyai sedikit bukti berkaitan kualiti ujian yang digunakan. Biasanya ia
diperoleh daripada kritikan murid atau rakan guru yang lain semasa perbincangan
dijalankan. Ujian tersebut boleh digunakan semula dengan menilai keberkesanan
item ujian. Kaedah ini juga dapat meningkatkan kualiti item yang dibina.
Salah satu kesilapan yang paling biasa dibuat oleh pengguna baru dalam
analisis item adalah bahawa mereka percaya analisis ujian adalah dilakukan
secara keseluruhan, bukan per item itu sendiri (Salkind, 2012). Analisis item
adalah untuk setiap item dalam satu masa. Jadi, jika item ujian ialah 50, maka
indeks kesukaran dan indeks diskriminasi boleh dikira untuk setiap item pada
ujian itu (50 set nilai indeks kesukaran dan diskriminasi). Amalan mendapatkan
purata bagi kedua-dua indeks ini untuk keseluruhan item adalah tidak wajar
kerana tujuan analisis item ini adalah untuk mendapatkan maklum balas
mengenai berapa baik item tersebut. Kemudian item tersebut boleh disemak
semula supaya dapat digunakan dengan lebih baik pada masa akan datang atau
bagi tujuan bank item.
4. OBJEKTIF
5. METODOLOGI
5
mini kajian ini, analisis item dijalankan secara manual melalui perisian Microsoft
Excel 10.0 berasaskan teori ujian klasik kerana bilangan sampel yang terlalu
sedikit iaitu 14 orang. Ia melibatkan kesemua murid di dalam kelas 6 Nilam.
Proses yang terlibat adalah:
p = NT + NR
T
di mana;
p = indeks kesukaran
NT = jumlah murid dalam kumpulan atas
NR = jumlah murid dalam kumpulan bawah
T = jumlah murid keseluruhan
6
Jadual 2: Interpretasi bagi nilai Indeks Kesukaran (p)
Menurut Nitko (2004), nilai indeks kesukaran yang ideal ialah di antara
0.30 – 0.80 @ 30% - 80 %.
d = NT - NR
0.5T
di mana;
d = indeks diskriminasi
NT = jumlah murid dalam kumpulan atas
NR = jumlah murid dalam kumpulan bawah
T = jumlah murid keseluruhan
7
Jadual 3: Interpretasi bagi nilai Indeks diskriminasi (d)
Indeks
Pentaksiran Item Keputusan
diskriminasi (d)
0.30 < d < 0.39 Diskriminasi positif yang Item sesuai dan diterima
sederhana/ item baik
0.20 < d < 0.29 Diskriminasi positif yang Item agak baik dan
rendah/ item sederhana baik boleh diterima
0.10 < d < 0.19 Diskriminasi positif yang Item marginal, perlu
sangat rendah/ item kurang diubahsuai
baik
6. ANALISIS
Skor dan pilihan jawapan murid 6 Nilam bagi Peperiksaan Akhir Tahun
(PAT) 2017 untuk mata pelajaran Teknologi Maklumat dan Komunikasi
(TMK) adalah seperti dalam Jadual 4.
8
Jadual 4: Skor Dan Alternatif Jawapan Murid 6 Nilam Bagi Kertas Teknologi Maklumat & Komunikasi Peperiksaan Akhir Tahun 2017
(Ujian Objektif)
KUMPULAN
MARKAH
NAMA
NOMBOR ITEM
PENUH
ID
MURID
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30
Kunci 100 D A A C A C A B D D B D A D D B A C B D D D B D D A C D C A
A11 nisha 82 D A B C B C A B D A D C A B C C A C B D D D B D C A C D C A
A06 nurqistina 78 D A D C B A A B C B D C A B B D A C B D D D B D D A C D B A
ATAS (A)
A02 htadusrie 74 D C A A B C A B D D B D A D B C B D A B D C B D A C C D C B
A04 shaarminie 74 A A A B D C A B D B D D A D D A D A B C D A B B D A C D B C
A01 shamyuktha 72 A A C B D C A B C A B A D D D A C A B D D D B A D A C D A B
A07 munirah 72 D A D B D C A B D D C D D A B B A D C B D A D D A A C D B A
A09 nurlatla 72 D A B B A C A B D A B C A B B C C B D A D D B D A A C D B C
A10 puteri 70 C A B B C B A B D B D A A C D C A B C D D C B D C A B D C A
A13 saffa 70 D A D B B A C B A A B B A A B C A B D A D D B D D A C D B A
BAWAH (B)
A08 nursabrina 68 A B B C A D A B D D C B A A C B D C A B D D C B C A C D A C
A12 diana 68 D A B C B C D C A A D B D D B C C A D B D B B D D A C D C A
A14 nurul fateha 68 D A B B A A A B A C C B A C B C A A B C D A B D D B C D B C
A03 gittasry 60 D A B C B A C A A A C B A C A D C B A A D C B D C B C D A B
A05 preissha 56 D C B A D C C B A D C D D B B C B D A C D A B C B A A C D B
6.2. Statistik Item
Indeks kesukaran item (p) dan indeks diskriminasi (d) bagi 30 item
tersebut adalah seperti dalam Jadual 5. Kedua-dua indeks ini
dibandingkan untuk menghasilkan keputusan/ penilaian terhadap
keberkesanan item tersebut.
Sederhana Sangat
8 0.86 86 0.29 Ubah Suai
Baik Mudah
Sederhana
11 0.29 29 0.29 Sukar Terima
Baik
Sederhana
12 0.29 29 0.29 Sukar Terima
Baik
10
Statistik Item Penilaian
Nombor
Keputusan
Item p %p d d p
Sederhana
14 0.29 29 0.29 Sukar Terima
Baik
Kurang
15 0.21 21 0.14 Sukar Ubah Suai
Baik
Sangat
16 0.14 14 0.00 Marginal Ubah Suai
Sukar
17 0.43 43 0.00 Marginal Sederhana Ubah Suai
Kurang
18 0.21 21 0.14 Sukar Ubah Suai
Baik
Sangat Terima (Amat
19 0.36 36 0.43 Sukar
Baik Sesuai)
Sederhana
20 0.29 29 0.29 Sukar Terima
Baik
Sangat
21 1.00 100 0.00 Marginal Ubah Suai
Mudah
Sederhana
22 0.43 43 0.29 Sederhana Terima
Baik
Sangat
23 0.86 86 0.00 Marginal Ubah Suai
Mudah
Kurang
26 0.79 79 0.14 Mudah Ubah Suai
Baik
Sederhana Sangat
27 0.86 86 0.29 Ubah Suai
Baik Mudah
Kurang Sangat
28 0.93 93 0.14 Ubah Suai
Baik Mudah
11
Jadual 6: Frekuensi Pilihan Jawapan Murid Bagi Kertas TMK Tahun 6 PAT
2017
12
NOMBOR KUMPULAN ALTERNATIF JAWAPAN
ITEM MURID A B C D JUMLAH
A 1 3 0 3 7
14 B 2 1 3 1 7
JUMLAH 3 4 3 4 14
A 0 4 1 2 7
15 B 1 4 1 1 7
JUMLAH 1 8 2 3 14
A 2 1 3 1 7
16 B 0 1 5 1 7
JUMLAH 2 2 8 2 14
A 3 1 2 1 7
17 B 3 1 2 1 7
JUMLAH 6 2 4 2 14
A 2 1 2 2 7
18 B 2 3 1 1 7
JUMLAH 4 4 3 3 14
A 1 4 1 1 7
19 B 3 1 1 2 7
JUMLAH 4 5 2 3 14
A 1 2 1 3 7
20 B 2 2 2 1 7
JUMLAH 3 4 3 4 14
A 0 0 0 7 7
21 B 0 0 0 7 7
JUMLAH 0 0 0 14 14
A 2 0 1 4 7
22 B 2 1 2 2 7
JUMLAH 4 1 3 6 14
A 0 6 0 1 7
23 B 0 6 1 0 7
JUMLAH 0 12 1 1 14
A 1 1 0 5 7
24 B 0 1 1 5 7
JUMLAH 1 2 1 10 14
A 3 0 1 3 7
25 B 0 1 3 3 7
JUMLAH 3 1 4 6 14
A 6 0 1 0 7
26 B 5 2 0 0 7
JUMLAH 11 2 1 0 14
A 0 0 7 0 7
27 B 1 1 5 0 7
JUMLAH 1 1 12 0 14
13
NOMBOR KUMPULAN ALTERNATIF JAWAPAN
ITEM MURID A B C D JUMLAH
A 0 0 0 7 7
28 B 0 0 1 6 7
JUMLAH 0 0 1 13 14
A 1 4 2 0 7
29 B 2 2 2 1 7
JUMLAH 3 6 4 1 14
A 3 2 2 0 7
30 B 3 2 2 0 7
JUMLAH 6 4 4 0 14
Taburan item bagi kertas TMK PAT 2017 murid 6 Nilam lebih jelas
digambarkan dalam Rajah 2. Item yang paling ideal adalah pada
%indeks kesukaran 50% dan indeks diskriminasi +1.00 (Salkind,
2012). Graf menunjukkan terdapat 4 item sahaja iaitu item 6, 7, 9, dan
19 yang terkandung dalam kawasan item yang sesuai dan boleh
diterima tanpa pengubahsuaian. Namun terdapat juga 5 item yang
boleh diterima kerana indeks diskriminasi yang sederhana baik iaitu
item 11,12, 14, 20 dan 22. Rumusan keseluruhan item dinyatakan
dengan lebih terperinci dalam Jadual 7. Faktor yang mempengaruhi
keberkesan item ini dan cadangan pengubahsuaian dihuraikan dengan
lebih mendalam dalam bab perbincangan.
14
Rajah 2: Taburan Analisis Item Kertas TMK Tahun 6 PAT 2017
15
7.3. Keputusan Tindakan
Frekuensi
Klasifikasi Item %
Item
Terima (Amat
4 13
Sesuai)
Terima 5 17
Ubah Suai 19 63
Buang/ Baiki 2 7
Jumlah 30 100
Berdasarkan Jadual 7, 20% item TMK Tahun 6 PAT 2017 adalah sesuai dan
boleh diterima. Manakala 19 item perlu diubahsuai dan 2 item perlu diteliti semula
samada perlu dibuang atau diperbaiki.
7. PERBINCANGAN
Item 1 adalah item marginal, item yang tidak dapat mendiskriminasikan murid
berpencapaian tinggi dan rendah kerana indeks diskriminasinya 0. Alternatif A
adalah distraktor yang lemah kerana ia menarik perhatian murid kumpulan atas
lebih daripada kumpulan bawah. Manakala alternatif B adalah distraktor yang
tidak berkesan kerana tiada murid yang memilihnya. Alternatif C pula berfungsi
seperti yang sepatutnya kerana ia menarik perhatian murid kumpulan bawah
sahaja. Masalah utama dalam item ini adalah wujudnya kekeliruan dalam
alternatif iaitu dari segi penggunaan bahasa bukan dari segi kandungan. Alternatif
A dan kunci jawapan D mempunyai maksud yang hampir sama tetapi
menggunakan ayat pasif dan aktif. Alternatif A boleh diubahsuai dengan
menggunakan jenis ayat yang sama iaitu Komputer ialah alat elektrik yang
berupaya menerima data untuk menghasilkan maklumat. Manakala alternatif B
pula boleh diubah kepada komputer ialah alat elektrik yang berupaya untuk
menerima dan memproses data.
16
Item 2 mempunyai nilai indeks diskriminasi yang positif namun kurang baik
(0.14). Ini mungkin disebabkan oleh ketidakberkesanan distraktornya seperti yang
ditunjukkan dalam Jadual 6. Alternatif D adalah distraktor yang tidak berfungsi
kerana tiada murid yang memilihnya. Ia bleh diubahsuai kepada komputer meja.
Manakala alternatif C boleh diubah kepada komputer riba.
Item 6 adalah item yang sangat baik (d=0.57) dan mempunyai tahap
kesukaran yang sederhana. Kesemua distraktor juga menunjukkan keberkesanan
yang baik kecuali alternatif A menunjukkan seorang murid kumpulan atas
memilihnya. Namun saya berpendapat ia harus dikekalkan dan diterima pakai.
Item 7 adalah salah satu item yang sangat berkesan dengan indeks
diskriminasi yang sangat baik dan tahap kesukaran yang mudah. Kesemua murid
kumpulan atas menjawab dengan betul. Alternatif C dan D berfungsi sebagai
distraktor yang baik. Tetapi pilhan B tidak berfungsi kerana tiada murid yang
memilih jawapan ini kerana soalan telah mengandungi klu. Item ini boleh dibaiki
dengan menghilangkan/ memadam tulisan pada ikon yang ditunjukkan.
17
Item 8 mempunyai indeks diskriminasi yang sederhana baik, maka tahap
kesukarannya boleh diubahsuai seperti item 7 memandangkan item 7 hingga 9
adalah saling berkait. Item 9 mempunyai indeks diskriminasi yang sangat baik dan
tergolong dalam item yang amat sesuai. Namun saya berpendapat item ini masih
perlu diperbaiki seperti item 7 dan 8 kerana murid kumpulan tinggi cenderung
untuk memilih alternatif C dan D sahaja kerana klu yang diperolehi daripada item
8 dan 9. Saya mencadangkan alternatif yang berbeza digunakan bagi ketiga-tiga
item ini seperti C++, Pascal, Logo, Alice dan Arduino.
Item 10 adalah item marginal kerana tidak dapat mengukur perbezaan murid.
Item ini bukanlah item yang baik kerana ia adalah penyataan sebenar di dalam
buku teks. Malahan, guru didapati tersalah kunci jawapan kerana kunci jawapan
sebenar ialah alternatif A. Perbezaan yang ketara dalam alternatif D
membenarkan murid meneka ia adalah jawapan yang betul atau salah. Ia
dicadangkan ditukar kepada aplikasi aturcara. Alternatif B pula dicadangkan
ditukar kepada perisian aturcara.
Item 11 mencatatkan nilai d yang sederhana baik dan nilai p yang sukar.
Walaupun analisis statistik menunjukkan item ini boleh diterima, namun
berdasarkan analisis frekuensi pilihan jawapan murid, pengubahsuaian perlu
dilakukan terhadap alternatif A kerana ia merupakan distraktor yang tidak
berfungsi. Ia dicadangkan ditukar kepada arahan aturcara. Ramai murid
kumpulan atas memilih alternatif D, maka ia dicadangkan ditukar kepada aplikasi
aturcara.
A. I dan II
B. I dan IV*
C. II dan III
D. III dan IV
18
dicadangkan ditukar kepada pemprosesan komputer dan Alternatif C sebagai
pengkodan komputer.
Item 16 adalah item marginal dan sangat sukar maka ia perlu diubahsuai.
Saya mencadangkan stem item diubah kepada apakah ciri pseudokod yang tiada
dalam algoritma? Alternatif C pula perlu diubah kepada Bahan. Manakala item A
pula diubah kepada Arahan. Kedua-dua alternatif ini menimbulkan kekeliruan di
kalangan murid kumpulan atas.
Item 19 dicadangkan oleh analisis statistik sebagai item yang amat sesuai
kerana mencatatkan indeks diskriminasi yang sangat baik dan nilai p yang sukar.
Tetapi analisis frekuensi menunjukkan wujud kekeliruan di kalangan murid
kumpulan atas kerana ia dipengaruhi faktor keupayaan/ pengetahuan murid dan
item ini juga berada dalam topik yang sama dengan item 17 dan 18.
Walaupun item 20 mencatatkan nilai d yang sederhana baik, isu item ini
adalah sama dengan item 19. Ini bermakna item 17 hingga 19 menggunakan
19
stem yang sama. Saya mencadangkan penggunaan item sebegini dihadkan
kepada tiga sahaja bagi memastikan ujian ini adil dan berkualiti untuk murid.
A. I dan II
B. I dan IV*
C. II dan III
D. III dan IV
A. Televisyen
B. Mesin Faks
C. Telefon Pintar*
D. Komputer riba
20
pemanas air bilik mandi, kerana menimbulkan kekeliruan di antara murid
kumpulan A.
Item 26 adalah item kategori mudah yang kurang baik. Ini mungkin
disebabkan kekeliruan di dalam penggunaan stem “teaching courseware”. Ia
dicadangkan ditukar kepada bahan pengajaran. Distraktor D tidak berfungsi, maka
dicadangkan diubah kepada:
I. I-think
II. VLE Frog
III. Facebook
IV. Whatsapps
A. I dan II*
B. I dan IV
C. II dan III
D. III dan IV
Item 27 mencatatkan nilai d yang sederhana baik dan nilai p yang sangat
mudah. Analisis frekuensi menunjukkan distraktor D tidak berfungsi dan semua
pelajar kumpulan A menjawab dengan betul. Distraktor D boleh diubah kepada
mesin pengering.
Item 28 adalah item yang kurang baik pada tahap sangat mudah maka ia
perlu diubahsuai. Ia dibuktikan dalam analisis frekuensi pilihan jawapan di mana
distraktor A dan B tidak berfungsi. Hampir semua murid kumpulan B dapat
menjawab betul, maka kunci jawapan D perlu diubahsuai kepada Albert Einstein
(saintis) atau Thomas Edison (pencipta lampu) bukan pemain bola yang popular
seperti Cristiano Ronaldo.
Akhir sekali, item 30 adalah item marginal dengan tahap kesukaran yang
sederhana. Ia dicadangkan untuk diubahsuai. Distraktor D tidak menjadi pilihan
murid kerana ia menjadi klu pada item 28. Perbincangan adalah sama seperti item
28 dan 29.
21
8. KESIMPULAN
Objektif kajian mini (i) menganalisis item dari aspek diskriminasi item dan
kesukaran item telah dihuraikan dengan mendalam di dalam bab analisis.
Manakala objektif kajian mini (ii) menentukan keberkesanan item dari aspek:
a. Diskriminasi Item
b. Kesukaran Item
d. Keberkesanan Distraktor
22
Jadual 8: Ringkasan Tindakan Terhadap 30 Item TMK Tahun 6 PAT 2017
Mudahkan 16 1 3
Buang 5, 18 dan 21 3 10
9. RUJUKAN
Ebel dalam Kenneth D. Hopkins & Julian C. Stanley (1941). Educational and
Psychological Measurement and Evaluation. London:
Gronlund, N.E & Linn,R.L. (1990). Measurement and Evaluation in Teaching 6th ed.
New York: McMillan Publishing Company.
Mehrens, W.A & Lehmann, I.J. (1984). Measurement and Evaluation in Education
and Psychology (3rd ed.). Tokyo: Holt, Rinehart and Winston Holt-Saunders.
Salkind, N.J (2013).Test & Measurement for People Who Hate Test & Measurement.
Los Angeles: Sage.
23
10. LAMPIRAN
24
25
26
27
28
29
30
31
32