TEORI TES KLASIK

ANALISIS SOAL MENGGUNAKAN QUEST DAN ITEMAN

Dosen Pengampu: Prof. Djemari Mardapi, Ph.D

DISUSUN OLEH:
NOVALIAH
NIM. 16701251002

PENELITIAN DAN EVALUASI PENDIDIKAN

PROGRAM PASCA SARJANA
UNIVERSITAS NEGERI YOGYAKARTA
2017
Berikut adalah data jawaban testi pada 40 item ujian kenaikan kelas

Nama Sekolah : SMA N 3 Muara Jambi

Kelas :X
Mata Pelajaran : Kimia
Tanggal Ujian : 20 November 2015
No. item : 01-40
Jumlah Testi : 40 Testi

Kunci Jawaban ACCABEDDECBBCDDBDCAEABECCADEBEEBAADADBCD

No. Testi Jawaban Testi
001 ACCABEDDECBBCCACEADAABECBAABBBDBEDCADBCA
002 ACCDBCDAECBACCBDEDBBABECCCDEBEBDBCDEABCB
003 ACCABEDDECBBCCBDEBBCABECCACBCEEBCCAAADDB
004 BCCABEDDCACACBABEABECCACCABBEAAECCCCADCE
005 ACAABEDDEBEACDBDECBCABEDCBEEEBBBCCDADDCE
006 ECCABECAECCACDBEECBCABECCABDECBEBEDADDCE
007 ECCABEDDACC9CABDEABEBBACBECBACAECCBDBEDE
008 ECCABEDDECCACABDEBABEDACCADBBAABCEAEBCDB
009 ECCABEDDECCACAB9ECABE9EACCBBDABEAEBDBEEE
010 ACCABEDDCCBBCCBDEAEEABECAABEBDCDCBDADBCC
011 BACDAEDDBADBEAAEDDCBACECCAABC9EBCCDACCAB
012 ACCABEDDECDBCAAEDDCBACECCABBC9EBCCD ADCCB
013 ACCAAEDDECABCCCCEDDBADECCDBBCEDBCADADBDC
014 ACEABEDDBCCACCCCEDABADEACDBBCEDBCCDCDECB
015 ACCABEDDEECACCCCEACAAEBCAABBCEDDECECADAB
016 ECDABEDDEECECDCEEACAAEBCCABACEDDECECADAB
017 ACCABBDDECACCDEEEDCAAEBEAAACCBADECECADAB
018 CCCABEADECCACBBCECDBECCCCDCBBDBBCCDBAADA
019 ACCABEADECCEECADEAEDBCACDBEBBECADCCBBDBA
020 DCEABEBDECCCCBACEABCCBECCCBBCDDBCCDBCABC
021 ACCDBEDCCCCBCCCCEADBABECCCBBCDDBCCDBCABC
022 ACCEBEDDECCBCCCDEADBABECCCBBCDDBCCDBCABC
023 ACCEBEEDECCACCCDACBEACEECCBACDDBCCDDEBDD
024 BCCBBEDEECBACCBCEABDABBCEACEBEABAEBADDEC
025 ACCBBEDDACBDCCBCEABDDEACCECEBEABCDABEDEC
026 ACCABEDDACBDCCBCECBDDEBBEACEBAEB9CABEDEC
027 ACCABEDDECBACCBCACBDEEBBEACEBEAECCABEEEC
028 ECCABEADDCBCCDCABBABECBBEACEBEBCCDAABDAA
029 ECCABEDDECBACBBEAACEBECEDEDDBEACBCAABBCC
030 ECCCBEEDECBACCDAACBBECEEEACEBEAAADAABDAC
031 EBCABBEDECBCCCCEDABDEEBCEECEBEAECDABEDAC
032 BCCCBEDCECBCCCCEDDEEEBBEEEACEBDBAACDEDEC
033 ACCABECDECBACCDEDABAECEEEACEBECBAAEBCADC
034 ABCABEADACBACAEEEBBBCDDECEBDBCCBBEBDCBAA
035 ACCDBEADECBBCCDADADEABEABEDCBCBDCEDACDDB
036 ABCABEDDACDACBDAECBEBBEACADBAEABADBABBAB
037 ACDABEDDBCDBCCACBDBEBBEBCEECBBADAEBABCBB
038 ACDABEDDCABBCCBEDACCEBCBCBBCDBCDDEBACCDB
039 ABEBBEDD9CBACCCCECBDADACAECEBAAAADBAEDDB
040 ECCACEBEABCACCEDEDDAEEEEACBDAEABBEAAEBDA
 PEMBAHASAN ANALISIS BUTIR SOAL

1. Analisis butir soal menggunakan program ITEMAN

a. Tingkat kesukaran
Tingkat kesukaran butir soal kimia berdasarkan hasil analisis butir dengan menggunakan
program ITEMAN dijelaskan pada tabel berikut:
Kategori Nomor Butir Jumlah Persentase (%)
P > 0.8
2, 3, 5, 6, 8, 10, 13 7 17.5
Mudah
0.3 p 0.8 1, 4, 7, 9, 11, 21, 22, 23, 24, 25,
17 42.5
Sedang 26, 28, 29, 30, 32, 35, 36,
p < 0.3 12, 14, 15, 16, 17, 18, 19, 20,
16 40
Sulit 27, 31, 33, 37, 38, 39, 40
Jumlah 40 100

Berdsarkan tabel diataas diketahui bahwa butir soal yang memiliki tingkat kesulitan
sedang sebanyak 17 butir soal atau sekitar 42.5% dari toral butir soal yang dianalisis.
Sebanyak 16 butir soal termasuk ke dalam kategori soal dengan tingkat kesulitan tinggi
atau sekitar 40%, sedangkan butir soal dengan tingkat kesulitan mudah terdapat 7 butir
soal atau sekitar 17.5%.

b. Daya Beda
Hasil analisis butir soal berdasarkan daya beda dianalisiss butir dengan menggunakan
program ITEMAN dapat dilihat pada tabl dibawah ini:
Kategori Nomor Butir Jumlah Persentase (%)
> 0.3 1, 10, 12, 21, 22, 23, 26, 35, 36,
11 27.5%
Baik 37, 39
2, 3, 4, 5, 6, 7, 8, 9, 11, 13, 14,
< 0.3 15, 16, 17, 18, 19, 20, 24, 25,
29 72.5%
Tidak baik 27, 28, 29, 30, 31, 32, 33, 34,
38, 40
Jumlah 40 100

Daya beda berdasarkan hasil analisis menghasilkan butir soal dengan kategori baik
sebanyak 11 butir soal atau sekitar 27.5% dan butir soal dengan kategori tidak baik
sebanyak 29 butir soal atau sekitar 72.5% dari total butir soal yang dianalisis.
c. EfektIfitas Distraktor
Efektifitas distraktor butir soal berdasarkan hasil analisis dengan menggunakan program
ITEMAN diperoleh sebagai berikut:
Kategori Nomor Butir Jumlah Persentase (%)
1, 2, 3, 5, 6, 7, 9, 10, 11, 12, 13,
> 5% 15, 20, 21, 22, 23, 24, 25, 26,
30 75
Baik 27, 28, 29, 31, 32, 34, 35, 36,
37, 38, 39
< 5% 4, 8, 14, 16, 17, 18, 19, 30, 33,
10 25
Tidak baik 40
Jumlah 40 100

Distraktor yang baik jika memiliki nilai lebih dari 0.05 pada setiap jawaban yang artinya
lebih dari 5% siswa memilih pilihan jawaban yang benar dan pengecoh yang telah
disediakan. Jadi, sebanyak 30 butir soal (75%) memilikidistraktor yang baik sedangkan
butir soal lainnya (25%) memiliki distraktor tidak baik. Terdapat 15 butir soal yang
memiliki peringatan check the key, yaitu soal dengan nomor 3, 4, 6, 8, 14, 16, 17, 19,
20, 24, 25, 30, 33, 34, 40. Hal ini disebabkan oleh responden tidak memilih kunci
jawaban sebagai jawaban mereka, namun cenderung memilih jawaban pengecoh.
d. Statistic analisis butir
No. Statitik Hasil
1 Jumlah butir soal 40
2 Jumlah peserta tes 40
3 Rata-rata skor 17.200
4 Varian 13.710
5 Simpangan baku 3.703
6 Skew 0.338
7 Kurtosis -0.757
8 Skor minimum 10.000
9 Skor maksimum 25.000
10 Median 17.000
11 Alpha 0.522
12 SEM 2.560
13 Mean p 0.430
14 Mean item-tot 0.213
15 Mean biserial 0.295
Berdasarkan tabel analisis btir diatas diketahui bahwa soal sebanyak 40 butir dengan
respon sebanyak 40 orang memiliki rata-rata skor 17.2 yang artinya rata-rata responden
menjawab benar hanya sekitar 17 butir soal. Varian diperoleh sebesar 13.710 sebagai
gambaran sebaran skor peserta tes dan simpangan baku sebesar 4.551. Kemiringan
distribusi skor responden yang memberikan gambaran tentang bentuk distribusi skor
responden dilihat dari nilai skew sebesar 0.338 dengan puncak distribusi skor (kurtosis)
yang merata memiliki nilai negative 0.757. koefisien reliabilitas alpha diperoleh sebesar
0.522 dengan kesalahan baku 2.56. Koefisien alpha yang diperoleh masih cukup rendah
<0,7. Rata-rata tingkat kesulitan sebesar 0,430 merupakan nilai yang cukup baik dengan
rata-rata daya beda 0.295, nilai ini kurang baik untuk dikategorikan perangkat dengan
karakteristik yang baik.
2. Analisis butir soal menggunakan program QUEST
a. Summary of item estimates
1. Reliability of item estimates 0,92, ini menunjukkan reliabilitas tes sangat tinggi
sehingga dapat disimpulkan bahwa semakin tinggi nilai reliabilitas maka sampel
uji coba sesuai atau fit dengan item yang diujikan
2. Berdasarkan informasi untuk fit statistics diketahui bahwa infit mean square (infit
MNSC) sebesar 1.00 dengan simpangan baku 0.09, artinya secara keseluruhan
item sesuai dengan model Rasch

b. Summary of case estimates

1. Reliability of case estimate 0,53, menunjukkan reliabilitas tes cukup tinggi.
Dengan demikian testi yang skornya tinggi akan benar pada setiap skor dan begitu
pula sebaliknya pada testi yang skornya rendah.
2. Mean infit mean square 1.00 dan SD 0.21.

c. Item estimates (thresholds)

Pada grafik item estimates thresholds menunjukkan tingkat kesukaran item, dari
grafik dipreoleh informasi butir yang paling sukar adalah nomor item 16 dan 40, dan
yang paling mudah pada item nomor 13.

d. Item fit

Berdasarkan data infit MNSQ, diketahui 40 item fit atau cocok dengan menggunakan
model Rasch atau model 1-PL dengan criteria batas penerimaan 0.77 sampai 0.30.

e. Item analysis results for observed responses

IRT KLASIK
Item Daya Beda Tingkat Kesukaran Daya Beda Tingkat Kesukaran
Skor Kategori Skor Kategori Skor Kategori Skor% Kategori
1 0.4 Baik 0.82 0.39 Baik 60 Sedang
2 0.16 Buruk -2.40 -0.08 Buruk 2.5 Sulit
3 0.13 Buruk -2.00 0.16 Buruk 2.5 Sulit
4 -0.06 Buruk -1.40 -0.06 Buruk 72.5 Sedang
5 0.11 Buruk -2.97 0.11 Buruk 92.5 Mudah
6 0.12 Buruk -2.97 0.12 Buruk 92.5 Mudah
7 0.24 Buruk -1.28 0.24 Buruk 70.0 Sedang
8 0.03 Buruk -2.19 0.03 Buruk 85.0 Mudah
9 -0.64 Buruk -1.00 0.23 Buruk 64.1 Sedang
10 0.33 Baik -2.00 0.33 Baik 82.5 Mudah
11 0.23 Buruk -0.18 0.23 Buruk 45.0 Sedang
12 0.45 Baik 0.61 0.44 Baik 28.2 Sulit
13 0.22 Buruk -3.40 0.22 Buruk 95.0 Mudah
14 -0.05 Buruk 1.63 -0.05 Buruk 12.5 Sulit
1t5 0.29 Buruk 1.88 0.29 Buruk 10.0 Sulit
16 -0.14 Buruk 3.33 -0.14 Buruk 2.6 Sulit
17 0.05 Buruk 1.23 0.05 Buruk 17.5 Sulit
18 0.11 Buruk 0.76 0.11 Buruk 25.0 Sulit
19 -0.05 Buruk 1.88 -0.05 Buruk 10.0 Sulit
20 0.11 Buruk 0.90 0.11 Buruk 22.5 Sulit
21 0.48 Baik -0.29 0.47 Baik 47.5 Sedang
22 0.37 Baik 0.00 0.36 Baik 41.0 Sedang
23 0.57 Baik -0.50 0.56 Baik 52.5 Sedang
24 0.08 Buruk -0.60 0.08 Buruk 55.0 Sedang
25 0.12 Buruk -0.60 0.12 Buruk 55.0 Sedang
26 0.33 Baik -0.18 0.33 Baik 45.0 Sedang
27 0.26 Buruk 1.63 0.25 Buruk 10.0 Sulit
28 0.20 Buruk 0.50 0.20 Buruk 30.0 Sedang
29 0.12 Buruk -0.29 0.12 Buruk 47.5 Sedang
30 0.06 Buruk -0.19 0.06 Buruk 44.7 Sedang
31 0.26 Buruk 1.88 0.25 Buruk 10.0 Sulit
32 0.24 Buruk -0.50 0.24 Buruk 52.5 Sedang
33 0.10 Buruk 1.03 0.10 Buruk 20.5 Sulit
34 0.16 Buruk 2.20 0.16 Buruk 7.5 Sulit
35 0.38 Baik 0.26 0.38 Baik 25.0 Sulit
36 0.48 Baik -0.18 0.48 Baik 45.0 Sedang
37 0.62 Baik 1.06 0.61 Baik 20.0 Sulit
38 0.28 Buruk 0.90 0.28 Buruk 22.5 Sulit
39 0.49 Baik 0.90 0.48 Baik 22.5 Sulit
40 0.03 Buruk 3.34 0.03 Buruk 2.5 Sulit