Evaluasi Pembelajaran Akuntansi

PA403
Tingkat Kesukaran
& Daya Pembeda
07
19 Oktober 2022
2
Profil Umum Hasil Tes

0 100 0 100 0 100

Ekstrim 1 (Kiri) Ekstrim 2 (Kanan)
Moderat / Normal
Sebagian besar siswa gagal Sebagian besar siswa berhasil

19102022
3

Konstruksi Soal
Bagaimana bisa Kualitas soal terkait bahasa,
ada ekstrim kiri kejelasan petunjuk, dan kelengkapan
soal
ekstrim kanan
begitu ?

Tingkat Kesukaran
Kualitas soal terkait peluang siswa
untuk menjawab benar setiap butir
soal

Daya Pembeda
Kualitas soal terkait kemampuan
membedakan siswa yang menguasai
dan tidak menguasai materi

19102022
4

Konstruksi Soal /
1 Analisis Kualitatif

19102022
 5

Analisis Analisis Materi

Konstruksi Soal

Analisis
Materi yang
Kualitatif Soal
ditanyakan Hanya ada
sesuai satu kunci
sesuai
dengan jawaban
dengan
indikator
kompetensi
Materi

Tidak
Konstruksi Bahasa mengandung
Pilihan
unsur yang
tanggapan
bertentangan
homogen dan
dengan
logis
norma
/hukum

19102022
 6

Analisis Analisis Konstruksi

Konstruksi Soal
Pokok soal dirumuskan dengan singkat, jelas, dan
Analisis 1 tegas

Kualitatif Rumusan pokok soal dan pilihan tanggapan

2 merupakan pernyataan yang diperlukan saja

Materi
3 Pokok soal tidak memberi petunjuk kunci jawaban

Konstruksi Bahasa Pokok soal tidak menggunakan pernyataan negatif

4 ganda

Gambar, grafik, tabel, diagram, atau sejenisnya

5 terang dan berfungsi

19102022
 7

Analisis Analisis Konstruksi

Konstruksi Soal

Analisis 6 Panjang pilihan tanggapan relatif sama

Kualitatif Pilihan tanggapan tidak memakai pernyataan

7 “semua jawaban benar” atau “semua jawaban salah”

Materi
8 Pilihan tanggapan yang berbentuk angka/waktu disusun
menurut urutan besar kecilnya angka atau kronologisnya

Konstruksi Bahasa Butir soal tidak bergantung pada tanggapan soal

9 sebelumnya

19102022
 8

Analisis Analisis Bahasa / Budaya

Konstruksi Soal
Menggunakan bahasa yang sesuai
Analisis 1 dengan kaidah bahasa Indonesia
Kualitatif
2 Menggunakan bahasa yang komunikatif

Materi

Tidak memakai bahasa yang berlaku

3 setempat/tabu
Konstruksi Bahasa

Pilihan tanggapan tidak mengulang

4 kata/kelompok kata yang sama, kecuali
merupakan satu kesatuan pengertian

19102022
 9

Contoh Format
Telaah /
Analisis Butir
Soal Pilihan
Majemuk

19102022
10

Analisis Tingkat
2 Kesukaran

19102022
11

Analisis Latar Belakang

Tingkat
Kesukaran 1. Semua soal harus dapat dijawab oleh siswa;
2. Banyaknya siswa yang menjawab benar tidak harus sama, tapi harus
ada yang menjawab benar

Difficulty 3. Jika tidak ada seorangpun yang menjawab benar, maka soal itu salah !

Index

• Perangkat soal harus memiliki tingkat kesukaran tertentu

• Setiap butir soal memiliki tingkat kesukaran yang berbeda

19102022
12
Difficulty Index

2
The Difficulty Index is the proportion or probability
that candidates, or students, will answer a test item
correctly. Generally, more difficult items have a lower
percentage, or P-value.

1
Difficulty index is defined
as the percentage of those Proporsi siswa yang menjawab benar
candidates who gave the
suatu item
correct response

Persentase siswa

3
yang memberikan It can range between 0.0 and 1.0, with a higher value
jawaban benar indicating that a greater proportion of examinees responded to
the item correctly, and it was thus an easier item.

Indeks kesukaran merentang antara 0 – 1. Semakin tinggi

nilai indeks menunjukkan semakin tinggi proporsi yang
menjawab benar, berarti tingkat kesukaran soal rendah (soal
mudah)

19102022
13
Difficulty Index

0 1

Contoh Interpretasi
Interval Tingkat
Tingkat Kesulitan Proporsi
Kesulitan
0,00 – 0,29 Sulit 30% 20% 10%
0,30 – 0,69 Sedang 40% 60% 80%
0,70 – 1,00 Mudah 30% 20% 10%

𝐉𝐦𝐥 .𝐒𝐢𝐬𝐰𝐚 𝐲𝐚𝐧𝐠 𝐦𝐞𝐧𝐣𝐚𝐰𝐚𝐛𝐛𝐞𝐧𝐚𝐫

Rumus yang digunakan 𝐓𝐢𝐧𝐠𝐤𝐚𝐭 𝐊𝐞𝐬𝐮𝐥𝐢𝐭𝐚𝐧=
𝐉𝐦𝐥 𝐬𝐢𝐬𝐰𝐚 𝐲𝐚𝐧𝐠 𝐦𝐞𝐧𝐠𝐢𝐤𝐮𝐭𝐢 𝐭𝐞𝐬
19102022
14

Contoh 1: Hitunglah tingkat kesukaran setiap butir soal di bawah ini !

Menghitung Testee 1 2 3 4 5 6 7 8 9 10
Tingkat A 0 1 1 0 1 0 1 0 1 1
B 1 0 1 0 1 0 0 1 0 1
Kesukaran C 1 0 0 1 0 0 1 0 1 0
D 0 0 0 1 1 0 1 1 0 1
E 1 1 1 0 1 0 0 1 1 1
F 0 0 1 1 1 0 1 1 0 0
G 1 0 0 0 1 1 1 0 1 1
H 0 0 1 1 0 0 1 1 1 0
I 1 0 0 1 1 0 1 1 1 1
J 1 1 1 0 1 1 1 0 1 0
𝑱𝑩 JB 6 3 6 5 8 2 8 6 7 6
𝑻𝑲 =
𝑱𝑺 TK 0,6 0,3 0,6 0,5 0,8 0,2 0,8 0,6 0,7 0,6

19102022
15

Analisis Daya
3 Pembeda

19102022
16

Daya Discriminating Power : … a measure of the ability of a test to

Pembeda distinguish between two or more groups being assessed

is a measure of how well an item is able to distinguish between

Discriminatory examinees who are knowledgeable and those who are not, or between
Power / masters and non-masters.

Discrimination
Index
refers to how good the test discriminates between students in the
upper group and the students in the lower group

Daya Pembeda soal adalah kemampuan sesuatu soal untuk

membedakan antara siswa yang berkemampuan tinggi dengan
siswa yang berkemampuan rendah.

19102022
17

Daya • Discriminatory power index antara -1 sampai dengan +1

Pembeda • Indeks bertanda negatif artinya soal tersebut lebih banyak dijawab
benar oleh kelompok bawah dibandingkan dengan oleh kelompok atas

Testee kelompok Atas

Discriminatory Testee
Analisis Daya
Power / Pembeda

Discrimination Testee kelompok Bawah

Index
Indeks ( D ) Klasifikasi Keterangan

Butir soal tersebut memiliki daya pembeda yang

0,71– 1,00 Excellent
sangat baik

0,40 – 0,69 Good Butir tersebut memiliki daya pembeda yang baik
Tafsir Kriteria Daya Pembeda
0,20 – 0,39 Satisfactory Butir tersebut memiliki daya pembeda yang cukup

< 0,20 Poor Butir tersebut daya pembedanya lemah sekali

Negatif Bad Butir tersebut daya pembedanya jelek sekali

19102022
18

Daya
Pembeda 𝑫=𝑷 𝑨 − 𝑷 𝑩 𝑷 𝑨=
𝑩𝑨
𝑱𝑨
𝑷 𝑩=
𝑩𝑩
𝑱𝑩
𝑷 𝑨 𝑷𝑩
Discriminatory 𝑫= −
Power / 𝑱 𝑨 𝑱𝑩
Discrimination
Index PA = Proporsi testi kelompok atas yang menjawab benar butir soal yang
bersangkutan
PB = Proporsi testi kelompok bawah yang menjawab benar butir soal
yang bersangkutan
Rumus JA = Jumlah testi kelompok atas
JB = Jumlah testi kelompok bawah
BA = Banyaknya testi kelompok atas yang menjawab benar butir soal yang
bersangkutan
BB = Banyaknya testi kelompok bawah yang menjawab benar butir soal
yang bersangkutan 19102022
19
Dari hasil tes berikut, hitung daya pembeda setiap butir soal :
Contoh 2 : Testee 1 2 3 4 5 6 7 8 9 10 Skor
A 0 1 1 0 1 0 1 0 1 1 6
B 1 0 1 0 1 0 0 1 0 1 5
C 1 0 0 1 0 0 1 0 1 0 4
Menghitung D 0 0 0 1 1 0 1 1 0 1 5
E 1 1 1 0 1 0 0 1 1 1 7
Daya Pembeda F 0 0 1 1 1 0 1 1 0 0 5
G 1 0 0 0 1 1 1 0 1 1 6
H 0 0 1 1 0 0 1 1 1 0 5
I 1 0 0 1 1 0 1 1 1 1 7
J 1 1 1 0 1 1 1 0 1 0 7

Testee 1 2 3 4 5 6 7 8 9 10 Skor
E 1 1 1 0 1 0 0 1 1 1 7
1. Urutkan I 1 0 0 1 1 0 1 1 1 1 7
berdasarkan Skor, J 1 1 1 0 1 1 1 0 1 0 7
Descending A 0 1 1 0 1 0 1 0 1 1 6
G 1 0 0 0 1 1 1 0 1 1 6
B 1 0 1 0 1 0 0 1 0 1 5
D 0 0 0 1 1 0 1 1 0 1 5
F 0 0 1 1 1 0 1 1 0 0 5
H 0 0 1 1 0 0 1 1 1 0 5
C 1 0 0 1 0 0 1 0 1 0 4
Benar 6 3 6 5 8 2 8 6 7 6
19102022
20
Dari hasil tes berikut, hitung daya pembeda setiap butir soal :
Contoh 2 : Testee 1 2 3 4 5 6 7 8 9 10 Skor
E 1 1 1 0 1 0 0 1 1 1 7
I 1 0 0 1 1 0 1 1 1 1 7
J 1 1 1 0 1 1 1 0 1 0 7 Kel. Atas
Menghitung A 0 1 1 0 1 0 1 0 1 1 6

Daya Pembeda G
B
1
1
0
0
0
1
0
0
1
1
1
0
1
0
0
1
1
0
1
1
6
5
D 0 0 0 1 1 0 1 1 0 1 5
F 0 0 1 1 1 0 1 1 0 0 5 Kel. Bawah
H 0 0 1 1 0 0 1 1 1 0 5
C 1 0 0 1 0 0 1 0 1 0 4
Benar 6 3 6 5 8 2 8 6 7 6
Atas 4 3 3 1 5 2 4 2 5 4
2. Hitung Proporsi Bawah 2 0 3 4 3 0 4 4 2 2
testi yang PA 0,8 0,6 0,6 0,2 1,0 0,4 0,8 0,4 1,0 0,8
menjawab benar PB 0,4 0,0 0,6 0,8 0,6 0,0 0,8 0,8 0,4 0,4
D 0,4 0,6 0,0 -0,6 0,4 0,4 0,0 -0,4 0,6 0,4

Silahkan
simpulkan
hasilnya !
19102022
21

Analisis Fungsi
4 Distraktor

19102022
22

Distractor Distractors are the incorrect answer options in multiple-choice

questions.

Pengecoh
A distractor can be defined as functional when it is intended to be
plausible for those students with low achievement

The purpose of a distractor is to see if the learner can

discriminate between correct and incorrect answer choices

Distraktor yang efektif harus benar-benar mengganggu dan

dianggap masuk akal oleh testi yang tidak tahu jawaban yang
benar.
19102022
23

Distractor Effective distractors have the potential to tell us whether:

• a test taker has achieved the performance objective
• the individual has misconceptions, faulty reasoning or will make errors
in the “real world”
Pengecoh
• the particular test item needs improvement
• a corresponding portion of a learning experience is ineffective

To develop effective distractors, researchers suggest considering the types

of questions below.
• What do people usually confuse this concept with?
• What mistakes do people make when performing this task?
• What is a common error people make when solving this problem?
• What are common misconceptions in this field?

19102022
24

Distractor

Pengecoh Pokok Soal : Deskripsi dan Pertanyaan

1. ………………….
A. ………….
Pilihan :
B. …………. Satu di antaranya Jawaban yang benar
C. …………. Empat lainnya merupakan pengecoh
(distractor)
D. ………….
E. ………….

• Distractor dikatakan berfungsi baik jika semakin banyak testee yang

memilihnya sebagai jawaban (terkecoh);
• Sekurang-kurangnya 5% testee yang terkecoh sudah menunjukkan distractor
berfungsi
19102022
25

Contoh 3 :
Pilihan ( Option )
No.
Kelompok Keterangan
Soal A B C D E Omit
Misalkan suatu Atas 20 2 1 2 0 0
hasil tes belajar
1 Bawah 10 6 5 2 2 0 Jawaban A
diikuti oleh 50
∑ 30 8 6 4 2 0
orang peserta tes,
bentuk soalnya Atas 2 4 13 5 1 1
adalah multiple 2 Bawah 3 6 12 2 0 1 Jawaban C
choice dengan 5 ∑ 5 10 25 7 1 2
pilihan (option). Atas 2 4 0 18 1 1
Jumlah soal tes 3 Bawah 1 5 0 16 2 0 Jawaban D
tersebut 40 butir. ∑ 3 9 0 34 3 1
Atas 2 18 1 2 1 0
4 Bawah 0 22 2 2 0 0 Jawaban B
∑ 2 40 3 4 1 0

19102022
26

Contoh 3 : Pilihan ( Option )

No.
Kelompok Onie Keterangan
Soal A B C D E
t
Atas 20 2   1   2   0   0
1 Bawah 10 6   5   2   2   0 Jawaban A
Misalkan suatu
hasil tes belajar ∑ 30 8 16% 6 12% 4 8% 2 4% 0
diikuti oleh 50 Atas 2   4   13 5   1   1
orang peserta tes, 2 Bawah 3   6   12 2   0   1 Jawaban C
bentuk soalnya ∑ 5 10% 10 20% 25 7 14% 1 2% 2
adalah multiple Atas 2   4   0   18 1   1
choice dengan 5 3 Bawah 1   5   0   16 2   0 Jawaban D
pilihan (option).
∑ 3 6% 9 18% 0 0% 34 3 6% 1
Jumlah soal tes
Atas 2   18 1   2   1   0
tersebut 40 butir.
4 Bawah 0   22 2   2   0   0 Jawaban B
∑ 2 4% 40 3 6% 4 8% 1 2% 0

Silahkan
simpulkan
hasilnya !
19102022
Anda telah
selesai pada
materi ini

19102022