PETA KONSEP

“FROM FRAMEWORK TO SURVEY DATA:

INSIDE THE PISA ASSESSMENT PROCESS”

Dibuat untuk memenuhi tugas mata kuliah Literasi Matematika yang di ampu oleh

Dr. Endah Budi Rahaju, M.Pd. dan Dr. Pradnyo Wijayanti, M.Pd.

Disusun :

Ika Prasetya Mukti (22070785002)/ 2022A

PENDIDIKAN MATEMATIKA
FAKULTAS PASCASARJANA
UNIVERSITAS NEGERI SURABAYA
2022
 Langkah Awal: Sebuah Kerangka Kerja Penilaian
Kerangka PISA awalnya dikembangkan untuk administrasi survei pertama pada tahun
2000, yang mencakup materi membaca, matematika dan sains (OECD 1999). Kerangka
kerja direvisi, diperbarui dan diperluas, seiring dengan berkembangnya zaman. Sebuah
kerangka kuesioner juga telah dikembangkan untuk pengumpulan berbagai elemen latar
belakangdan informasi siswa yang dikumpulkan melalui serangkaian kuesioner yang
digunakanbersama dengan instrumen kognitif.

Instrumen

Kuesioner untuk pengumpulan Instrumen Kognitif

berbagai elemen latar belakang dan
informasi siswa

Prosedur Administrasi Tes Umum

Instrumen Survei Berkualitas Tinggi

Kontrol Kualitas Linguistik untuk Bahan
Kerangka penilaian diberlakukan melalui instrumen Tes
survei yang dikembangkan untuk menghasilkan
indikator konstruksi yang tepat.

Proses Pengembangan

1. Semua negara yang berpartisipasi dalam administrasi tertentu dari survei PISA
didorong untuk mengirimkan soal
2. Tim pengembangan tes membuat proses yang ketat untuk mengubah ide yang
disarankan menjadi konten tes dan kemudian di revisi
3. soal kemudian diujikan ke lapangan dengan skala kecil
4. Pengembang tes mencatat proses berpikir tersebut dengan cermat untuk analisis
selanjutnya
5. uji tes lapangan dari set soal menggunakan kelompok siswa yang lebih besar
6. versi sumber soal disiapkan dalam bahasa Inggris dan Prancis, dan kemudian
dibentuk dan dikirim ke negara-negara yang berpartisipasi untuk ditinjau.

Pertanyaan untuk digunakan dalam berbagai kuesioner latar belakang

dikembangkan dengan menggunakan mekanisme yang sama.

Sampel Siswa Ilmiah yang Tepat

Pengambilan sampel untuk survei utama PISA di setiap administrasi kemudian
dilanjutkan melalui dua tahap utama:
1. penanggung jawab internasional memilih sampel sekolah secara acak, dengan
probabilitas pemilihan sebanding dengan jumlah siswa yang memenuhi syarat.
2. kemudian untuk masing-masing sekolah sampel tersebut memilih
sampel acak dari siswa yang memenuhi syara
Mengontrol Kualitas Linguistik untuk Bahan Tes
Dua aspek utama penjaminan mutu yang terkait dengan kendali mutu linguistik dalam
PISA:
1. langkah-langkah yang diikuti sebagai bagian dari pengembangan soal tes untuk
mempertimbangkan masalah bahasa, budaya, dan terjemahan untuk mengantisipasi
dan meminimalkan potensi kesulitan penerjemahan.
2. Mekanisme yang digunakan untuk mencapai kualitas setinggi mungkin di 85 versi
nasional instrumen survei (tes dan kuesioner) yang berbeda dalam 43 bahasa berbeda yang
digunakan dalam administrasi survei PISA 2012 ditinjau secara singkat.

Masalah Kualitas Linguistik

dalam Desain Soal Tes

Masalah sintaksis, masalah kosakata, masalah Memaksimalkan Kualitas Linguistik Versi

budaya, dan bahkan hal-hal yang berkaitan
dengan penyajian grafik. Masalah sintaksis bisa
juga disebut masalah tata kalimat Bahasa.
Masalah terkait kosakata juga dapat
menyebabkan masalah terjemahan. Masalah
budaya sering kali terkait dengan tingkat
keakraban yang berbeda dengan objek yang
dirujuk dalam masalah matematika.
Nasional: Tantangan jaminan kualitas utama
muncul sehubungan dengan kebutuhan setiap
negara yang berpartisipasi dalam PISA untuk
menyiapkan bahan uji dalam bahasa
pengantar lokal yang dapat dianggap sebanding
dengan versi sumber yang disiapkan oleh
tim pembuat soal dalam kancah internasiona

Pedoman administrasi ujian mencakup hal-hal seperti protokol untuk menghubungi sekolah
untuk mengatur rincian dasar seperti lokasi dan waktu setiap sesi ujian, dan izin dari orang
tua untuk partisipasi siswa di negara-negara di mana hal ini diperlukan pengemasan,
pengangkutan, pengiriman dan penyimpanan bahan uji untuk memastikan bahan tersebut
tetap aman sebelum sesi pengujian; pengaturan di pusat pengujian pada hari pengujian,
termasuk misalnya menyiapkan ruangan, dan melakukan pengujian perangkat keras komputer
yang telah ditentukan sebelumnya untuk digunakan dalam komponen pengujian berbasis
komputer; saat sesi tes berlangsung

Pemrosesan Dan Penilaian Tanggapan Survei

Tantangan utama yang disajikan pada tahap pemrosesan dan penilaian tanggapan survei ada
dalam kaitannya dengan (kira-kira) 50% item yang memerlukan intervensi manual untuk
menafsirkan tanggapan siswa dan mengubahnya menjadi kode digital. Memastikan kualitas dan
konsistensi dalam cara tanggapan ini diproses di lebih dari 60 negara yang berpartisipasi dalam
PISA 2012 menggunakan beberapa langkah.

Pengambilan, Pemrosesan, dan Analisis Data

1. Negara peserta mengirimkan data yang diambil dari sesi pengujian
2. Pakar pengambilan sampel kontraktor terlebih dahulu memproses data yang diajukan
3. Sebuah tim analis di ACER memeriksa data yang dikirimkan oleh masing-masing negara
untuk setiap variabel untuk memastikan konsistensi dan kelengkapan
4. Analisis awal data untuk setiap negara dilakukan, dan laporan terperinci dibuat dan
dikirimkan ke setiap negara untuk memberikan kesempatan bagi analis di setiap negara untuk
meninjau data mereka dan memeriksa pengamatan tak terduga tentang data tersebut.
5. Metode analitik yang digunakan dalam PISA serupa dengan yang digunakan
dalam survei skala besar lainnya.