ITEM TEST

ANALYSIS
Menganalisis Soal
(Norm Referenced Test)
■ Apakah anda yakin soal anda berkualitas?
■ Ukuran item soal berkualitas

Ambigu

Salah Kunci
Jawaban

Terlalu Mudah atau Terlalu Sulit

Daya Beda (Discrimination)

LANGKAH

Ujikan Analisis
Membu
at Soal
pada Scoring Item
Siswa Soal
 Langkah Analisis Soal
(untuk Norm Referenced Test)

Hitung skor masing-masing siswa.

Urutkan skor tertinggi sampai skor terendah.

Ambil 27% lembar jawaban dari skor atas (upper group) dan 27%
lembar jawaban dari skor bawah (lower group). Sisa sebanyak 46%
disisihkan.
 Item Analysis Form
1 2 3 4 5 6 7
(Upper (Lower (Difference) (D) (Middle (Total) (p)
Item 27%) 27%) 46%)

1
a 5 3
*b 15 7 8 0.30 25 47 0.47
c 0 12
d 0 0
e 7 5
Menafsirkan Data Analisis Soal
Untuk Penilaian Acuan Normal
 Mendeteksi Soal yang Ambigu
Jika frekuensi siswa upper group memilih opsi yang salah sama
dengan jumlah siswa yang memilih jawaban benar.
Contoh :
4+3x6= Upper 27%
a. 22* 11
b. 27 2
c. 42 11
d. Tidak ada dari jawaban di atas 1
 Mendeteksi Miskeyed
Salah satu cara adalah dengan memeriksa jawaban siswa di
upper group.
Contoh:
Siapa presiden pertama Amerika Serikat? Upper Group
a. John Adams* 3
b. Abraham Lincoln 1
c. Franklin Roosevelt 0
d. George Washington 12
 Mendeteksi Menebak (Guessing)
Ketika siswa di upper group merespon dengan frekuensi yang sama
terhadap semua opsi, ada indikasi menebak.

Contoh:
Zamindar adalah sebuah Upper Group
a. Pedang Kecil 6
b. Tanaman Afrika 5
c. Pemilik Properti* 6
d. Prajurit Pribumi 6
 Mendeteksi Daya Beda atau Diskriminasi (Indeks D)
Soal yang baik adalah soal yang mampu membedakan anak pintar
dan anak tidak pintar.
Sangat rasional jika siswa dengan nilai tinggi, memiliki pengetahuan
atau informasi yang lebih banyak daripada siswa dengan nilai rendah
 Indeks D ( +1,0 sampai -1,0
Daya Beda Baik : (0.31) – (+1.0)
Daya Beda Cukup : (0.21) – (+0.30)
Daya Beda Buruk : (-1,0 – (0,20)

 Indeks Diskriminasi untuk Soal Homogen dan Tidak

Homogen
■ Jika soal homogin, skor total mencerminkan kemampuan
upper/lower
■ Jika soal heterogin, skor total tidak mampu mencerminkan
kemampuan upper/lower
Difficulty Level (p)
■ Menggambarkan proporsi siswa yang menjawab benar
■ P level 0 – 1
■ P value doesn’t indicate that an item is bad or good

Sulit
Sedang 0,00-
Mudah 0,50- 0,49
0,85- 0,84
1,00
 Hubungan Kesulitan Soal dan Daya Beda

• Ada hubungan tingkat kesulitan dengan daya Beda soal

• Item yang terlalu mudah/sulit tidak dapat secara efektif
membuat soal memiliki daya beda tinggi/tendah.
Hubungan Antara p denganNilai Maksimal D

Nilai P Nilai Maksimal D

1.00 .00

.90 .20

.80 .40

.70 .60

.60 .80

.50 1.00

.40 .80

.30 .60

.20 .40

.10 .20

.00 .00
 Hubungan Guessing dan P-value
 
 Meningkatkan Kualitas Item Soal

 Memeriksa jawaban siswa kelompok upper dan lower,

untuk setiap opsi. Tinjau kembali soal untuk membuat soa-
soal tersebut lebih diskriminatif, mengurangi ambigu, dan
lebih fungsional.
 Semua opsi pengecoh harus mampu mendiskriminasi
negatif (opsi pengecoh harus sedikit dipilih oleh kelompok
upper)
 Mengurangi Kerja Dalam
Melakukan Analisis Soal
Mintalah Bantuan kepada Siswa

Gunakan Format Jawaban pada Satu Halaman

Lakukan analisis soal hanya untuk tes yang sangat penting

Yakinkan bahwa penulisan soal sudah benar (lakukan
editing dengan baik)
Gunakan sampling atas lembar jawaban siswa

Gunakan teknologi (IT) untuk membantu

mendokumentasikan/menganalisis
Mengembangkan File Soal
untuk Tes Buatan Guru
- Buatlah bank soal (tiap soal direkam D dan p value nya)
- Bank soal harus mempermudah guru untuk memilih atau
menggunakan soal sesuai dengan tujuan.
- Semakin banyak file soal maka guru tidak akan perlu membuat
soal yang sama berulang kali.
Bank soal yang terkenal dikembangkan oleh
Northwest Evaluation Association (Naccarato,
1988):
■ Koleksi soal ujian
■ Soal diklasifikasikan berdasarkan konten, tujuan umum, topik
■ Tinjauan soal atau informasi validitas lainnya
■ Perkiraan keandalan
■ Teori pertimbangan soal ujian
■ Soal yang dikembangkan oleh guru, negara dan staf kantor
pusat lokal, dan anggota Asosiasi
■ Hal-hal yang ditinjau untuk menghindari bias gender, untuk
memastikan bahwa sasaran dan soal cocok, dan untuk
meningkatkan kejelasan soal.
Manfaat Hasil Analisis Item Soal

Selecting and Marking

Placing

Facilitating Learning
Diagnosing (Feedback)

Evaluating of Curriculum
Selecting and Placing
 Diagnosing

Memeriksa opsi yang salah dipilih oleh siswa

    Upper Middle Lower

Group Group Group
a 0.009 0   1
b 0.900 2   3
c 0.090 5 5 2
d 0.9000 0   1
Item Analysis untuk Creterion
Referenced Test (CRT)
Dalam CRT, orientasi pada
ketuntasan.
Soal cenderung mudah sehingga
D rendah
D indeks menjadi tidak penting
(kecuali untuk mengukur
perbedaan tingkat ketuntasan)
Karena harus tuntas, p-value
cenderung tinggi (masih banyak
kontroversi
- Tingkat kesulitas pada CRT
tidak penting (fokus pada
domain tujuan pembelajaran)
- Dalam praktiknya, tidak dapat
dipenuhi secara sempurna
Item Analysis untuk Creterion
Referenced Test (CRT)

Sensitivity Indices
• Ingat CRT dibuat untuk mencapai tujuan pembelajaran
• Untuk mengetahui apakah pembelajaran berhasil/tidak seharusnya
dilihat dari hasil pre dan post test
• Sensitivity Indices untuk menentukan apakah item-item memiliki
domain yang sama dan seberapa baik item itu dapat merefleksikan apa
yang akan dicapai oleh guru
• Index Sensitivitas

The pretest-posttest sensitivity index

The Uninstructed-Instructed Sensitivity Index

The Pretest-posttest Sensitivity Index

Items Pretest p-value Posttest p-value Sensitivity Index

1 0.25 0.70 0.45
 The Uninstructed-Instructed
Sensitivity Index
Menggunakan dua kelompok yang diuji, satu kelompok diberi
instruksi dan kelompok lain tidak. Nilai dua kelompok
dibandingkan, dan perbedaan keduanya adalah ukuran
sensitivitas instruksional.
Tugas Individu

■ Tiap individu membuat soal 5 Multiple Choice dengan 5 option

jawaban
■ Buatlah Google form, dan setting soal anda di google form.
■ Mintalah teman-teman saudara untuk menjawab soal anda (boleh
teman sekelas/lain kelas/adik kelas/kakak kelas). Minimal 30 orang
yang menjawab soal anda
■ Analislah 5 item soal anda terkait dengan tingkat kesulitan, daya
beda, keberfungsian distractor dan kunci jawaban, atau yang lainnya.
■ Kumpulkan hasil kerja anda di Sipejar, Maksimal tanggal 20 April
2020 Pukul 11.55