BAB 4.

KERANGKA ILMU PENGETAHUAN PISA 2018 │ 97

4. Kerangka Sains PISA 2018

Bab ini mendefinisikan “literasi sains” sebagaimana yang dinilai dalam Program for International Student Assessment
(PISA) tahun 2018. Bab ini menjelaskan jenis konteks, pengetahuan, dan kompetensi yang tercermin dalam
tugas-tugas yang digunakan PISA untuk mengukur literasi sains. Bab ini juga membahas bagaimana prestasi siswa
dalam sains diukur dan dilaporkan.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

98 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Pendahuluan: Literasi ilmiah dan mengapa itu penting

Dokumen ini memberikan deskripsi dan alasan untuk kerangka kerja yang menjadi dasar penilaian PISA terhadap
literasi ilmiah - domain utama di PISA 2015 dan domain minor di PISA 2018. Kerangka kerja PISA sebelumnya
untuk penilaian sains (OECD, 1999 [ 1]; OECD, 2003 [ 2]; OECD, 2006 [ 3]) telah menggunakan literasi ilmiah sebagai
konstruksi utama mereka. Framework PISA 2015/2018 ini telah menyempurnakan dan memperluas konstruksi
sebelumnya, khususnya framework PISA 2006 yang digunakan sebagai dasar penilaian pada tahun 2006, 2009
dan 2012.

Literasi sains dikembangkan melalui pendidikan sains yang luas dan terapan. Dengan demikian, dalam
kerangka inilah, konsep literasi sains mengacu pada pengetahuan sains dan teknologi berbasis sains. Namun,
sains dan teknologi berbeda dalam tujuan, proses, dan produknya. Teknologi mencari solusi optimal
untuk masalah manusia dan mungkin ada lebih dari satu solusi optimal. Sebaliknya, sains mencari
jawaban atas pertanyaan spesifik tentang dunia material alami.

Literasi ilmiah juga membutuhkan tidak hanya pengetahuan tentang konsep dan teori sains tetapi juga
pengetahuan tentang prosedur dan praktik umum yang terkait dengan penyelidikan ilmiah dan bagaimana ini
memungkinkan sains untuk maju. Oleh karena itu, individu yang melek sains memahami konsepsi dan
gagasan utama yang membentuk dasar pemikiran ilmiah dan teknologi; bagaimana pengetahuan tersebut
diperoleh; dan sejauh mana pengetahuan tersebut dibenarkan oleh bukti atau penjelasan teoretis.

Untuk semua alasan ini, literasi ilmiah dianggap sebagai kompetensi kunci (Rychen
dan Salganik, 2001 [ 4]) yang didefinisikan dalam istilah kemampuan menggunakan pengetahuan dan informasi secara interaktif.
Dengan kata lain, literasi ilmiah mencakup "pemahaman tentang bagaimana [suatu ilmu] mengubah cara seseorang dapat
berinteraksi dengan dunia dan bagaimana ia dapat digunakan untuk mencapai tujuan yang lebih luas" (ibid .: 10).

Sisa dari dokumen ini menjelaskan literasi ilmiah dan menjelaskan bagaimana PISA mencoba mengukur konsep ini.

Literasi ilmiah: Menuju definisi

Ada kepercayaan luas bahwa pemahaman tentang sains sangat penting sehingga harus menjadi fitur
pendidikan setiap anak muda (American Association for the
Kemajuan Sains, 1989 [ 5]; COSCE, 2011 [ 6]; Fensham, 1985 [ 7]; Millar dan Osborne, 1998 [ 8]; Dewan Riset
Nasional, 2012 [ 9]; Ständige Konferenz der Kultusminister der Länder in der Bundesrepublik Deutschland,
2005 [ 10]; Departemen Pendidikan, Tionghoa Taipei, 1999 [ 11]). Memang di banyak negara, sains merupakan
unsur wajib dalam kurikulum sekolah mulai dari taman kanak-kanak hingga penuntasan wajib belajar.

Diperlukan tiga kompetensi khusus sains untuk memahami dan terlibat dalam diskusi kritis tentang isu-isu yang
melibatkan sains dan teknologi. Yang pertama adalah kemampuan untuk memberikan penjelasan tentang fenomena
alam, artefak teknis, dan teknologi serta implikasinya bagi masyarakat. Kedua adalah kompetensi untuk menggunakan
pengetahuan dan pemahaman tentang inkuiri ilmiah untuk mengidentifikasi pertanyaan yang dapat dijawab oleh inkuiri
ilmiah; mengusulkan cara-cara di mana pertanyaan-pertanyaan seperti itu mungkin dijawab; dan mengidentifikasi
apakah prosedur yang tepat telah digunakan. Ketiga adalah kompetensi untuk menafsirkan dan mengevaluasi data dan
bukti secara ilmiah dan mengevaluasi apakah kesimpulan tersebut dijamin.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 99

Dengan demikian literasi sains dalam PISA 2018 ditentukan oleh tiga kompetensi yaitu:

• Menjelaskan fenomena secara ilmiah;

• Mengevaluasi dan merancang penyelidikan ilmiah; dan

• Menafsirkan data dan bukti secara ilmiah.

Semua kompetensi ini membutuhkan pengetahuan. Menjelaskan fenomena sains dan teknologi, misalnya,
menuntut pengetahuan tentang kandungan sains - selanjutnya disebut pengetahuan konten. Kompetensi kedua
dan ketiga, bagaimanapun, membutuhkan lebih dari sekedar pengetahuan konten. Mereka juga bergantung pada
pemahaman tentang bagaimana pengetahuan ilmiah dibentuk dan tingkat kepercayaan yang dimilikinya.
Mengenali dan mengidentifikasi fitur yang menjadi ciri inkuiri ilmiah memerlukan pengetahuan tentang prosedur
standar yang mendasari beragam metode dan praktik yang digunakan untuk menetapkan pengetahuan ilmiah -
yang disebut di sini sebagai pengetahuan prosedural. Akhirnya, kompetensi ini membutuhkan pengetahuan
epistemik, didefinisikan di sini sebagai pemahaman tentang alasan praktik umum penyelidikan ilmiah, status
klaim yang dibuat, dan arti istilah-istilah dasar seperti teori, hipotesis, dan data. Kotak 4.1 memberikan lebih
banyak contoh dari masing-masing dari ketiga jenis pengetahuan ini, yang kesemuanya juga akan dikembangkan
lebih lanjut dalam kerangka ini.

Pengetahuan prosedural dan epistemik diperlukan untuk mengidentifikasi pertanyaan yang dapat diterima oleh penyelidikan
ilmiah, untuk menilai apakah prosedur yang tepat telah digunakan untuk memastikan bahwa klaim dapat dibenarkan, dan
untuk membedakan masalah ilmiah dari hal-hal nilai atau pertimbangan ekonomi. Pengetahuan prosedural dan epistemik
juga penting untuk memutuskan apakah banyak klaim yang meliputi media kontemporer telah diturunkan dengan
menggunakan prosedur yang tepat dan dijamin; bagaimanapun juga, selama hidup mereka, individu perlu memperoleh
pengetahuan, bukan melalui penyelidikan ilmiah, tetapi melalui penggunaan sumber daya seperti perpustakaan dan internet,
dan perlu mengevaluasi pengetahuan tersebut.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

100 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Kotak 4.1. Pengetahuan ilmiah: terminologi PISA 2015/2018

Dokumen ini didasarkan pada pandangan bahwa pengetahuan ilmiah terdiri dari tiga elemen yang dapat dibedakan
tetapi saling terkait. Yang pertama dan yang paling dikenal adalah pengetahuan tentang fakta, konsep, gagasan,
dan teori tentang alam yang telah dibangun sains, seperti bagaimana tumbuhan mensintesis molekul kompleks
menggunakan cahaya dan karbon dioksida atau sifat partikulat materi. Jenis pengetahuan ini disebut sebagai
"pengetahuan konten" atau "pengetahuan tentang konten sains".

Pengetahuan tentang prosedur yang digunakan ilmuwan untuk menetapkan pengetahuan ilmiah disebut sebagai
"pengetahuan prosedural". Ini adalah pengetahuan tentang praktik dan konsep yang menjadi dasar penyelidikan empiris,
seperti pengulangan pengukuran untuk meminimalkan kesalahan dan mengurangi ketidakpastian, pengendalian variabel,
dan prosedur standar untuk merepresentasikan dan mengkomunikasikan data (Millar et al., 1994 [ 12]). Baru-baru ini, ini
telah diuraikan sebagai satu set "konsep bukti" (Roberts, Gott dan Glaesser, 2010 [ 13]).

Lebih lanjut, memahami sains sebagai praktik juga membutuhkan “pengetahuan epistemik”, yang mengacu pada
pemahaman tentang peran konstruksi tertentu dan fitur pendefinisian.
penting untuk proses membangun pengetahuan ilmiah (Duschl, 2008 [ 14]). Pengetahuan epistemik
meliputi pemahaman tentang fungsi pertanyaan, observasi, teori,
hipotesis, model, dan argumen bermain dalam sains; pengakuan atas keragaman bentuk penyelidikan
ilmiah; dan memahami peran peer review dalam membangun pengetahuan yang dapat dipercaya.

Pembahasan yang lebih rinci tentang ketiga bentuk pengetahuan ini disajikan pada bagian selanjutnya tentang
pengetahuan ilmiah pada Tabel 4.4, Tabel 4.5 dan Tabel 4.6.

Literasi ilmiah membutuhkan ketiga bentuk pengetahuan ilmiah. Oleh karena itu, PISA 2015 difokuskan pada
sejauh mana anak usia 15 tahun mampu menampilkan ketiga bentuk pengetahuan ini secara tepat dalam
berbagai konteks pribadi, lokal, nasional dan global. Perspektif ini lebih luas daripada banyak program sains
sekolah, di mana pengetahuan konten sering mendominasi.

Pertimbangan inilah yang menyebabkan definisi literasi ilmiah untuk PISA 2015 dan 2018 sebagai berikut:

Kotak 4.2. Definisi literasi sains 2015/2018

Literasi sains adalah kemampuan untuk terlibat dengan isu-isu yang berhubungan dengan sains, dan dengan ide-ide sains, sebagai
warga negara yang reflektif.

Oleh karena itu, orang yang melek ilmu pengetahuan mau terlibat dalam wacana yang bernalar tentang ilmu pengetahuan dan
teknologi yang membutuhkan kompetensi:

• Menjelaskan fenomena secara ilmiah:

Mengenali, menawarkan dan mengevaluasi penjelasan untuk berbagai fenomena alam dan teknologi.

• Mengevaluasi dan merancang penyelidikan ilmiah:

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 101

Menjelaskan dan menilai penyelidikan ilmiah dan mengusulkan cara-cara menjawab pertanyaan secara
ilmiah.

• Menafsirkan data dan bukti secara ilmiah:

Menganalisis dan mengevaluasi data, klaim dan argumen dalam berbagai representasi dan menarik kesimpulan
ilmiah yang sesuai.

Catatan Penjelasan

Komentar berikut ditawarkan untuk memperjelas arti dan penggunaan definisi literasi ilmiah untuk
tujuan penilaian PISA 2018.

• Penggunaan istilah "literasi ilmiah" daripada "sains" menggarisbawahi pentingnya penilaian

sains PISA pada penerapan pengetahuan ilmiah dalam konteks situasi dunia nyata.

• Untuk tujuan penilaian PISA, kompetensi ini hanya akan diuji menggunakan konten,
pengetahuan prosedural dan epistemik sains yang diharapkan dapat dimiliki oleh siswa
berusia 15 tahun.

• Akhirnya, di seluruh dokumen ini, istilah “alam” digunakan untuk merujuk pada fenomena yang terjadi
di atau terkait dengan objek apa pun di dunia materi atau kehidupan.

Kompetensi yang dibutuhkan untuk literasi sains

Kompetensi 1: Menjelaskan fenomena secara ilmiah

Sains telah berhasil mengembangkan sekumpulan teori penjelasan yang telah mengubah pemahaman kita
tentang alam. Apalagi, pengetahuan tersebut telah memungkinkan berkembangnya teknologi yang mendukung
kehidupan manusia, seperti pengobatan berbagai penyakit dan komunikasi yang cepat ke seluruh dunia. Jadi,
kompetensi untuk menjelaskan fenomena sains dan teknologi bergantung pada pengetahuan tentang gagasan
penjelas utama sains ini.

Menjelaskan beberapa fenomena ilmiah, bagaimanapun, membutuhkan lebih dari sekedar kemampuan untuk mengingat dan
menggunakan teori, ide penjelasan, informasi, dan fakta ( pengetahuan konten).
Menawarkan penjelasan ilmiah juga membutuhkan pemahaman tentang bagaimana pengetahuan tersebut diperoleh dan tingkat
kepercayaan seseorang tentang klaim ilmiah apa pun. Oleh karena itu, individu juga memerlukan pengetahuan tentang bentuk dan
prosedur standar yang digunakan dalam penyelidikan ilmiah untuk memperoleh pengetahuan tersebut ( pengetahuan prosedural)
dan pemahaman tentang peran dan fungsinya sendiri dalam membenarkan pengetahuan yang dihasilkan oleh sains ( pengetahuan
epistemik).

Kompetensi 2: Mengevaluasi dan merancang inkuiri ilmiah

Literasi sains menuntut siswa memiliki pemahaman tentang tujuan sains

penyelidikan, yaitu untuk menghasilkan pengetahuan yang dapat diandalkan tentang alam (Ziman, 1978 [ 15]).
Data diperoleh dengan observasi dan eksperimen, baik di laboratorium maupun di lapangan, timbal
untuk pengembangan model dan hipotesis penjelas yang memungkinkan prediksi yang kemudian dapat diuji secara
eksperimental. Klaim dan hipotesis baru selalu bersifat sementara dan mungkin
tidak berdiri ketika menjadi sasaran tinjauan sejawat kritis (Longino, 1990 [ 16]). Oleh karena itu, para ilmuwan berkomitmen untuk
menerbitkan atau melaporkan temuan mereka dan metode yang digunakan untuk memperolehnya

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

102 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

bukti yang mendukung temuan tersebut. Pengukuran, bagaimanapun, semuanya mengandung suatu derajat kesalahan. Oleh
karena itu, sebagian besar pekerjaan ilmuwan eksperimental ditujukan untuk penyelesaian ketidakpastian dengan mengulangi
pengukuran, mengumpulkan sampel yang lebih besar, membuat instrumen yang lebih akurat, dan menggunakan teknik statistik
yang menilai tingkat kepercayaan pada hasil apa pun.

Kompetensi ini mengacu pada pengetahuan konten, pengetahuan tentang prosedur umum yang digunakan dalam sains ( pengetahuan
prosedural) dan fungsi prosedur ini dalam membenarkan klaim apa pun yang diajukan oleh sains ( pengetahuan
epistemik). Pengetahuan prosedural dan epistemik memiliki dua fungsi. Pertama, pengetahuan semacam itu dibutuhkan
oleh individu untuk menilai penyelidikan ilmiah, sehingga memutuskan apakah prosedur yang sesuai telah diikuti dan
apakah kesimpulannya dijamin. Kedua, pengetahuan semacam itu memungkinkan individu untuk mengusulkan, setidaknya
dalam istilah yang luas, bagaimana pertanyaan ilmiah dapat diselidiki dengan tepat.

Kompetensi 3: Menafsirkan data dan bukti secara ilmiah

Menafsirkan data adalah aktivitas inti bagi semua ilmuwan. Ini biasanya dimulai dengan mencari pola, mungkin melalui
pembuatan tabel sederhana atau visualisasi grafis. Setiap hubungan atau pola dalam data kemudian harus dibaca dengan
menggunakan pengetahuan tentang pola standar. Individu yang melek ilmiah juga dapat diharapkan untuk memahami bahwa
ketidakpastian adalah fitur yang melekat pada semua pengukuran, dan bahwa salah satu kriteria untuk mengungkapkan
keyakinan kita dalam suatu temuan adalah kemungkinan bahwa hal itu mungkin terjadi secara kebetulan. Semua ini mengacu
pada satu tubuh pengetahuan prosedural.

Namun, tidak cukup untuk memahami prosedur yang telah diterapkan untuk mendapatkan kumpulan data.
Individu yang melek ilmiah harus dapat menilai apakah prosedur ini sesuai dan apakah klaim selanjutnya
dapat dibenarkan ( pengetahuan epistemik). Misalnya, banyak kumpulan data dapat diinterpretasikan
dengan berbagai cara, dan para ilmuwan harus mendukung interpretasi mereka sendiri sambil
mempertahankannya dari kritik orang lain. Resolusi interpretasi mana yang terbaik membutuhkan
pengetahuan sains ( pengetahuan konten). Sikap kritis dan skeptis terhadap semua bukti empiris memang
merupakan ciri khas ilmuwan profesional.

Organisasi domain

Untuk tujuan penilaian, definisi literasi sains PISA 2018 dapat dikategorikan sebagai terdiri dari tiga
aspek yang saling terkait (lihat Gambar 4.1).

Tabel 4.1. Aspek kerangka penilaian literasi ilmiah untuk PISA 2015/2018

Konteks Masalah pribadi, lokal / nasional dan global, baik saat ini maupun sejarah, yang menuntut pemahaman tentang ilmu pengetahuan dan teknologi.

Pengetahuan Pemahaman tentang fakta utama, konsep dan teori penjelasan yang membentuk dasar pengetahuan ilmiah. Pengetahuan tersebut mencakup
pengetahuan tentang dunia alam dan artefak teknologi ( pengetahuan konten), pengetahuan tentang bagaimana ide-ide semacam itu
diproduksi ( pengetahuan prosedural), dan pemahaman tentang alasan yang mendasari untuk prosedur ini dan pembenaran untuk
penggunaannya ( pengetahuan epistemik).

Kompetensi Kemampuan menjelaskan fenomena secara ilmiah, mengevaluasi dan merancang inkuiri ilmiah, serta menginterpretasikan data

dan bukti ilmiah.

Masing-masing aspek ini dibahas lebih lanjut di bawah ini.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 103

Gambar 4.1. Keterkaitan antara ketiga aspek tersebut

Konteks untuk item penilaian

PISA 2018 menilai pengetahuan ilmiah menggunakan konteks yang mengangkat masalah terkait yang sering kali relevan
dengan kurikulum pendidikan sains di negara peserta. Namun, item penilaian tidak terbatas pada konteks sains sekolah.
Item dalam penilaian sains PISA 2018 mungkin terkait dengan diri, keluarga dan kelompok sebaya (pribadi), dengan
komunitas (lokal dan nasional) atau dengan kehidupan di seluruh dunia (global). Konteksnya mungkin melibatkan
teknologi atau, dalam beberapa kasus, elemen sejarah yang dapat digunakan untuk menilai pemahaman siswa tentang
proses dan praktik yang terlibat dalam memajukan pengetahuan ilmiah.

Konteks item dalam penilaian sains PISA juga telah dikategorikan ke dalam lima aplikasi sains dan
teknologi: kesehatan dan penyakit, sumber daya alam, kualitas lingkungan, bahaya, dan batas-batas
sains dan teknologi. Namun, penilaian sains PISA bukanlah penilaian konteks. Sebaliknya, ia menilai
kompetensi dan pengetahuan dalam konteks tertentu. Konteks ini dipilih berdasarkan relevansinya
dengan minat dan kehidupan siswa dan karena merupakan bidang di mana literasi sains memiliki nilai
khusus dalam meningkatkan dan mempertahankan kualitas hidup dan dalam pengembangan kebijakan
publik.

Tabel 4.2 menunjukkan bagaimana kelima aplikasi ini berinteraksi dengan konteks pribadi, lokal / nasional, dan global yang
dijelaskan di atas.

Tabel 4.2. Konteks untuk penilaian literasi ilmiah PISA 2018

Pribadi Lokal / Nasional Global

Kesehatan dan penyakit Pemeliharaan kesehatan, Pengendalian penyakit, pilihan makanan, kesehatan masyarakat Epidemi, penyebaran penyakit
kecelakaan, nutrisi menular

Sumber daya alam Konsumsi pribadi Pemeliharaan populasi manusia, kualitas hidup, Dapat diperbarui dan tidak dapat diperbarui

material dan energi keamanan, produksi dan distribusi makanan, pasokan sistem alami, pertumbuhan populasi, penggunaan

energi spesies secara berkelanjutan

Lingkungan Tindakan ramah lingkungan, Distribusi populasi, pembuangan limbah, dampak Keanekaragaman hayati, ekologis

kualitas penggunaan dan pembuangan bahan dan lingkungan keberlanjutan, pengendalian pencemaran, produksi

perangkat dan hilangnya tanah / biomassa

Bahaya Penilaian risiko pilihan gaya hidup Perubahan cepat (misalnya gempa bumi, cuaca buruk), Perubahan iklim, dampak komunikasi
perubahan lambat dan progresif (misalnya erosi pantai, modern
sedimentasi), risiko
penilaian
Perbatasan sains Aspek ilmiah dari hobi, teknologi Materi, perangkat dan proses baru, modifikasi genetik, Punahnya spesies, penjelajahan ruang,
dan teknologi pribadi, musik, dan aktivitas teknologi kesehatan, transportasi asal dan struktur Alam Semesta
olahraga

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

104 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Kompetensi Ilmiah
Tabel 4.3, Tabel 4.4 dan Tabel 4.5 memberikan gambaran rinci tentang tugas yang membentuk masing-masing dari
tiga kompetensi yang terdiri dari literasi sains. Kumpulan kompetensi ilmiah ini mencerminkan pandangan bahwa
sains paling baik dilihat sebagai ansambel praktik sosial dan epistemik yang umum di semua sub-bidangnya (National
Research Council, 2012 [ 9]).
Oleh karena itu, semua kompetensi ini dibingkai sebagai tindakan, yang menyampaikan apa yang dipahami dan mampu
dilakukan oleh orang yang melek ilmiah.

Tabel 4.3. Kompetensi keilmuan PISA 2018: Menjelaskan fenomena secara ilmiah

Menjelaskan fenomena secara ilmiah

Mengenali, menawarkan dan mengevaluasi penjelasan untuk berbagai fenomena alam dan teknologi melalui:
• Mengingat dan menerapkan pengetahuan ilmiah yang sesuai;

• Mengidentifikasi, menggunakan dan menghasilkan model dan representasi penjelasan;

• Membuat dan membenarkan prediksi yang sesuai;

• Menawarkan hipotesis penjelas;

• Menjelaskan implikasi potensial dari pengetahuan ilmiah bagi masyarakat

Menunjukkan kompetensi menjelaskan fenomena secara ilmiah menuntut siswa untuk mengingat kembali pengetahuan
konten yang sesuai dalam situasi tertentu dan menggunakannya untuk menafsirkan dan memberikan penjelasan untuk
fenomena yang menarik. Pengetahuan tersebut juga dapat digunakan untuk menghasilkan hipotesis penjelas tentatif untuk
fenomena yang diamati atau saat disajikan dengan data. Orang yang melek sains diharapkan dapat menggunakan model
ilmiah standar untuk membangun representasi sederhana untuk fenomena sehari-hari dan kemudian menggunakan
representasi tersebut untuk membuat prediksi. Kompetensi ini meliputi kemampuan mendeskripsikan atau menafsirkan
fenomena dan memprediksi kemungkinan perubahan. Selain itu, mungkin melibatkan pengenalan atau identifikasi deskripsi,
penjelasan, dan prediksi yang sesuai.

Tabel 4.4. Kompetensi ilmiah PISA 2018: Mengevaluasi dan merancang inkuiri ilmiah

Mengevaluasi dan merancang inkuiri ilmiah

Menjelaskan dan menilai penyelidikan ilmiah dan mengusulkan cara-cara menjawab pertanyaan secara ilmiah melalui:

• Mengidentifikasi pertanyaan yang dieksplorasi dalam studi ilmiah tertentu;

• Pertanyaan yang membedakan yang mungkin untuk diselidiki secara ilmiah;

• Mengusulkan cara untuk mengeksplorasi pertanyaan yang diberikan secara ilmiah;

• Mengevaluasi cara mengeksplorasi pertanyaan yang diberikan secara ilmiah;

• Menggambarkan dan mengevaluasi berbagai cara yang digunakan para ilmuwan untuk memastikan keandalan data dan objektivitas serta generalisasi
penjelasan.

Kompetensi mengevaluasi dan merancang penyelidikan ilmiah diperlukan untuk mengevaluasi laporan temuan dan
investigasi ilmiah secara kritis. Hal ini bertumpu pada kemampuan untuk membedakan pertanyaan ilmiah dari bentuk
penyelidikan lain, atau dengan kata lain, untuk mengenali pertanyaan yang dapat diteliti secara ilmiah. Kompetensi ini
membutuhkan pengetahuan tentang ciri-ciri utama penyelidikan ilmiah, seperti hal-hal apa yang harus diukur, variabel apa
yang harus diubah atau dikendalikan, dan tindakan apa yang harus dilakukan agar data yang akurat dan tepat dapat
dikumpulkan. Diperlukan kemampuan untuk mengevaluasi kualitas data, yang pada gilirannya bergantung pada
pengakuan bahwa data tidak selalu akurat sepenuhnya. Ini juga membutuhkan kompetensi untuk mengidentifikasi apakah
suatu penyelidikan didorong oleh premis teoritis yang mendasarinya atau, sebagai alternatif, apakah itu berusaha untuk
menentukan pola yang dapat diidentifikasi.

Orang yang melek ilmiah juga harus mampu mengenali pentingnya penelitian sebelumnya dalam menilai nilai dari
setiap penyelidikan ilmiah yang diberikan. Apalagi mahasiswa perlu

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 105

memahami pentingnya mengembangkan disposisi skeptis terhadap semua laporan media dalam sains, mengakui bahwa
semua penelitian didasarkan pada pekerjaan sebelumnya, bahwa temuan dari satu studi selalu tunduk pada
ketidakpastian, dan bahwa studi mungkin bias oleh sumber pendanaannya. Kompetensi ini menuntut siswa untuk
memiliki pengetahuan prosedural dan epistemik tetapi juga dapat memanfaatkan pengetahuan konten sains mereka.

Tabel 4.5. Kompetensi ilmiah PISA 2018: Menafsirkan data dan bukti secara ilmiah

Menafsirkan data dan bukti secara ilmiah

Menganalisis dan mengevaluasi data ilmiah, klaim dan argumen dalam berbagai representasi dan menarik kesimpulan yang sesuai melalui:

• Transformasi data dari satu representasi ke representasi lainnya;

• Menganalisis dan menafsirkan data dan menarik kesimpulan yang sesuai;

• Mengidentifikasi asumsi, bukti dan penalaran dalam teks terkait sains;

• Membedakan argumen yang didasarkan pada bukti dan teori ilmiah dengan yang didasarkan pada pertimbangan lain;

• Mengevaluasi argumen dan bukti ilmiah dari berbagai sumber (misalnya surat kabar, internet, jurnal).

Siswa yang dapat menginterpretasikan data dan bukti secara ilmiah harus dapat menyampaikan makna dari suatu bukti ilmiah
dan implikasinya kepada khalayak tertentu dengan kata-katanya sendiri, menggunakan diagram atau representasi lain yang
sesuai. Kompetensi ini membutuhkan penggunaan alat matematika untuk menganalisis atau meringkas data, dan kemampuan
untuk menggunakan metode standar untuk mengubah data menjadi representasi yang berbeda.

Kompetensi ini juga termasuk mengakses informasi ilmiah dan menghasilkan serta mengevaluasi
argumen dan kesimpulan berdasarkan bukti ilmiah (Kuhn, 2010 [ 17];
Osborne, 2010 [ 18]). Ini mungkin juga melibatkan evaluasi kesimpulan alternatif menggunakan bukti; memberikan alasan untuk atau
menentang kesimpulan yang diberikan; dan mengidentifikasi asumsi yang dibuat
mencapai sebuah kesimpulan. Singkatnya, individu yang melek ilmiah harus mampu mengidentifikasi
hubungan logis atau cacat antara bukti dan kesimpulan.

Pengetahuan ilmiah

Pengetahuan konten

Hanya sampel domain konten sains yang dapat dinilai dalam penilaian sains PISA 2018. Oleh karena itu,
penting bahwa kriteria yang jelas digunakan untuk memandu pemilihan pengetahuan yang akan dinilai.
Pengetahuan konten yang dinilai PISA dipilih dari bidang utama fisika, kimia, biologi, dan ilmu bumi dan
ruang angkasa dan:

• Relevan dengan situasi kehidupan nyata;

• Mewakili konsep ilmiah penting atau teori penjelas utama yang memiliki kegunaan abadi; dan

• sesuai dengan tingkat perkembangan anak usia 15 tahun.

Tabel 4.6 menyajikan kategori pengetahuan konten yang dipilih dengan menerapkan kriteria di atas.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

106 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Tabel 4.6. Pengetahuan konten dalam penilaian sains PISA 2018

Sistem fisik, meliputi:

Struktur materi (misalnya, model partikel, ikatan)
Sifat materi (misalnya, perubahan keadaan, konduktivitas termal dan listrik) Perubahan kimia
materi (misalnya, reaksi kimia, transfer energi, asam / basa)
Gerak dan gaya (misalnya, kecepatan, gesekan) dan aksi pada jarak (misalnya, gaya magnet, gravitasi dan elektrostatis) Energi dan
transformasinya (misalnya, kekekalan, disipasi, reaksi kimia)
Interaksi antara energi dan materi (misalnya, gelombang cahaya dan radio, gelombang suara dan seismik)

Sistem kehidupan, termasuk:

Sel (misalnya, struktur dan fungsi, DNA, perbedaan antara sel tumbuhan dan hewan) Konsep
organisme (misalnya, uniseluler vs. multiseluler)
Manusia (misalnya, kesehatan; nutrisi; subsistem seperti pencernaan, pernapasan, peredaran darah, ekskresi dan reproduksi serta
hubungannya)
Populasi (misalnya, spesies, evolusi, keanekaragaman hayati, variasi genetik) Ekosistem

(misalnya, rantai makanan, materi dan aliran energi) Biosfer (misalnya, jasa ekosistem,

keberlanjutan)

Sistem bumi dan luar angkasa, termasuk:

Struktur Bumi (misalnya litosfer, atmosfer, hidrosfer) Energi di Bumi

(misalnya, sumber, iklim global)
Perubahan di Bumi (misalnya lempeng tektonik, siklus geokimia, kekuatan konstruktif dan destruktif) Sejarah Bumi
(misalnya, fosil, asal dan evolusi)
Bumi di luar angkasa (misalnya gravitasi, tata surya, galaksi)

Sejarah dan skala alam semesta dan sejarahnya (misalnya, tahun cahaya, teori Big Bang)

Pengetahuan prosedural

Tujuan fundamental sains adalah menghasilkan penjelasan tentang dunia material. Penjelasan tentatif
pertama kali dikembangkan dan kemudian diuji melalui penyelidikan empiris. Penyelidikan empiris
bergantung pada konsep dan metode tertentu yang mapan seperti pengertian variabel dependen dan
independen, pengendalian variabel, berbagai jenis pengukuran dan bentuk kesalahan, metode untuk
meminimalkan kesalahan, pengenalan pola umum yang diamati dalam data, dan metode penyajian data.
Pengetahuan tentang konsep dan prosedur standar yang penting untuk penyelidikan ilmiah inilah yang
mendasari pengumpulan, analisis, dan interpretasi data ilmiah. Ide semacam itu membentuk tubuh
pengetahuan prosedural, yang juga disebut "konsep bukti" (Roberts, Gott

dan Glaesser, 2010 [ 13]; Millar dkk., 1994 [ 12]). Pengetahuan semacam itu dibutuhkan baik untuk melakukan penyelidikan ilmiah
dan terlibat dalam tinjauan kritis terhadap bukti yang mungkin digunakan
mendukung klaim tertentu. Contoh yang tercantum dalam Tabel 4.7 adalah beberapa contoh pengetahuan
prosedural yang dapat diuji.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 107

Tabel 4.7. Pengetahuan prosedural dalam penilaian sains PISA 2018

Pengetahuan prosedural

Konsep variabel, termasuk variabel dependen, independen dan kontrol;

Konsep pengukuran, misalnya pengukuran kuantitatif, observasi kualitatif, penggunaan skala atau instrumen lain, variabel kategori dan
kontinu;

Cara menilai dan meminimalkan ketidakpastian seperti pengulangan dan pengukuran rata-rata;

Mekanisme untuk memastikan replikasi (kedekatan kesepakatan antara pengukuran berulang dari kuantitas yang sama) dan akurasi (kedekatan
kesepakatan antara kuantitas yang diukur dan nilai sebenarnya) pengukuran;

Cara-cara umum untuk mengabstraksi dan merepresentasikan data menggunakan tabel, grafik dan bagan dan penggunaannya yang sesuai; Kontrol variabel

dan perannya dalam desain eksperimental;

Penggunaan uji coba terkontrol secara acak untuk menghindari temuan yang membingungkan dan untuk mengidentifikasi kemungkinan mekanisme penyebab; Sifat

desain yang sesuai untuk pertanyaan ilmiah tertentu, misalnya, eksperimental, berbasis lapangan, atau pencarian pola.

Pengetahuan Epistemik

Pengetahuan epistemik adalah pengetahuan tentang konstruksi dan fitur yang menentukan yang penting untuk proses
pembangunan pengetahuan dalam sains (misalnya hipotesis, teori dan observasi) dan peran mereka dalam membenarkan
pengetahuan yang dihasilkan oleh sains (Duschl, 2008 [ 14]). Siswa menggunakan pengetahuan epistemik untuk
menjelaskan, dengan contoh, perbedaan antara teori ilmiah dan hipotesis atau antara fakta ilmiah dan observasi.
Pengetahuan epistemik mencakup pemahaman bahwa konstruksi model, baik itu representasi langsung, abstrak atau
matematis, adalah ciri utama sains dan bahwa model semacam itu lebih mirip dengan peta daripada gambar akurat dari
dunia material. Siswa juga harus menyadari bahwa kata "teori" tidak digunakan dengan cara yang sama dalam sains
seperti dalam bahasa sehari-hari, di mana ia merupakan sinonim dari "tebakan" atau "firasat". Sedangkan pengetahuan
prosedural diperlukan untuk menjelaskan apa yang dimaksud dengan strategi pengendalian variabel, pengetahuan
epistemik diperlukan untuk menjelaskan mengapa penggunaan strategi pengendalian variabel sangat penting dalam
membangun pengetahuan ilmiah.

Individu yang melek ilmiah juga akan memahami bahwa para ilmuwan menggunakan data untuk memajukan
klaim atas pengetahuan dan argumen itu adalah ciri umum sains. Para siswa ini juga memahami peran dan
pentingnya tinjauan sejawat sebagai mekanisme yang telah ditetapkan komunitas ilmiah untuk menguji klaim
baru. Pengetahuan epistemik dengan demikian memberikan dasar pemikiran untuk prosedur dan praktik di
mana para ilmuwan terlibat dan dasar untuk dasar kepercayaan pada klaim yang dibuat sains tentang alam.

Tabel 4.8 menunjukkan apa yang dianggap sebagai komponen utama pengetahuan epistemik yang diperlukan
untuk literasi ilmiah.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

108 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Tabel 4.8. Pengetahuan epistemik dalam penilaian sains PISA 2018

Pengetahuan epistemik

Konstruksi dan ciri-ciri ilmu pengetahuan, yaitu:

• Sifat observasi ilmiah, fakta, hipotesis, model dan teori;

• Maksud dan tujuan sains (untuk menghasilkan penjelasan tentang alam) yang dibedakan dari teknologi (untuk menghasilkan solusi optimal bagi
kebutuhan manusia), apa yang merupakan pertanyaan ilmiah atau teknologi, dan apa yang merupakan data yang sesuai;

• Nilai-nilai sains, seperti komitmen terhadap publikasi, objektivitas, dan penghapusan bias;
• Sifat penalaran yang digunakan dalam sains, seperti deduktif, induktif, inferensi hingga penjelasan terbaik (abduktif), analogis dan
berbasis model;

Peran konstruk dan fitur tersebut dalam menjustifikasi pengetahuan yang dihasilkan oleh sains, yaitu:

• Bagaimana klaim ilmiah didukung oleh data dan penalaran dalam sains;

• Fungsi berbagai bentuk penyelidikan empiris dalam membangun pengetahuan, termasuk tujuan mereka (untuk menguji hipotesis penjelas atau
mengidentifikasi pola) dan desain mereka (observasi, eksperimen terkontrol, studi korelasional);

• Bagaimana kesalahan pengukuran mempengaruhi tingkat kepercayaan dalam pengetahuan ilmiah; Penggunaan

• dan peran model fisik, sistem dan abstrak serta batasannya;

• Peran kolaborasi dan kritik dan bagaimana peer review membantu membangun kepercayaan pada klaim ilmiah;

• Peran pengetahuan ilmiah, bersama dengan bentuk-bentuk pengetahuan lainnya, dalam mengidentifikasi dan menangani masalah-masalah sosial dan teknologi.

Pengetahuan epistemik kemungkinan besar akan diuji secara pragmatis: siswa biasanya akan diminta untuk
menafsirkan dan menjawab pertanyaan yang membutuhkan pengetahuan epistemik daripada ditanya secara langsung
tentang poin-poin dalam Tabel 4.8. Misalnya, siswa mungkin diminta untuk mengidentifikasi apakah kesimpulan
dibenarkan oleh data atau bukti apa yang paling mendukung hipotesis yang diajukan dalam suatu item dan
menjelaskan alasannya.

Penilaian Domain

Permintaan Kognitif

Fitur utama dari kerangka PISA 2018 adalah definisi tingkat permintaan kognitif dalam penilaian literasi
ilmiah dan di ketiga kompetensi kerangka tersebut. Dalam kerangka penilaian, kesulitan item, yang
diturunkan secara empiris, sering dikacaukan dengan permintaan kognitif. Kesulitan item empiris
diperkirakan dari proporsi populasi yang mengambil tes yang berhasil menyelesaikan item dengan benar,
sedangkan permintaan kognitif mengacu pada jenis pemrosesan mental yang diperlukan (Davis dan

Buckendahl, 2011 [ 19]). Suatu item dapat memiliki tingkat kesulitan yang tinggi karena menguji pengetahuan yang tidak dikenal oleh
sebagian besar siswa sementara pada saat yang sama hanya membutuhkan kognitif yang rendah.
menuntut karena siswa hanya perlu mengingat sepotong informasi. Sebaliknya, suatu item dapat menuntut secara kognitif
karena memerlukan individu untuk menghubungkan dan mengevaluasi banyak item pengetahuan, namun masih memiliki tingkat
kesulitan yang rendah karena masing-masing potongan pengetahuan tersebut mudah diingat (Brookhart dan Nitko, 2011 [ 20]).

Berbagai klasifikasi skema permintaan kognitif telah dikembangkan dan dievaluasi

sejak Taksonomi Bloom pertama kali diterbitkan (Bloom, 1956 [ 21]). Ini sebagian besar didasarkan pada
kategorisasi jenis pengetahuan dan proses kognitif terkait yang digunakan untuk menggambarkan tujuan
pendidikan atau tugas penilaian.

Kedalaman Pengetahuan Webb (1997 [ 22]) secara khusus dikembangkan untuk mengatasi perbedaan antara
penilaian dan harapan pembelajaran siswa. Tingkat kedalaman Webb adalah
ditentukan oleh kompleksitas konten dan tugas yang diperlukan. Kerangka kerjanya

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 109

terdiri dari empat level: level 1 (mengingat), level 2 (menggunakan keterampilan dan / atau pengetahuan konseptual), level 3 (pemikiran
strategis) dan level 4 (pemikiran yang diperluas). Setiap level ditentukan oleh sejumlah besar kata kerja (beberapa di antaranya muncul
di lebih dari satu level) yang menggambarkan proses kognitif. Kerangka kerja ini menawarkan pandangan yang lebih holistik tentang
tugas-tugas pembelajaran dan penilaian dan membutuhkan analisis konten dan proses kognitif yang diminta oleh tugas apa pun.

Semua kerangka kerja yang dijelaskan di atas telah membantu mengklasifikasikan pengetahuan dan kompetensi
dalam kerangka sains PISA 2018. Dalam menyusun kerangka kerja tersebut, diakui bahwa terdapat tantangan dalam
mengembangkan butir soal berdasarkan hierarki kognitif. Tiga tantangan utama adalah:

1. Terlalu banyak upaya akan dilakukan untuk menyesuaikan item tes ke dalam kerangka kognitif tertentu, yang dapat
menyebabkan item yang kurang berkembang;

2. Permintaan kognitif yang diinginkan dan aktual mungkin tidak selaras, dengan kerangka kerja yang mendefinisikan
tujuan yang ketat dan menuntut kognitif, tetapi item yang menjalankan standar dengan cara yang jauh lebih tidak
menuntut secara kognitif; dan

3. Tanpa kerangka kerja kognitif yang terdefinisi dengan baik dan dipahami, penulisan dan pengembangan item
mungkin sering berfokus pada kesulitan item dan dengan demikian hanya menggunakan proses kognitif dan
jenis pengetahuan yang terbatas. Ini kemudian hanya akan dijelaskan dan ditafsirkan post hoc, daripada
dibangun dari teori peningkatan kompetensi.

Kerangka kerja sains PISA 2018 menggunakan versi Kedalaman Pengetahuan Webb yang diadaptasi
kisi (Webb, 1997 [ 22]) di samping pengetahuan dan kompetensi ilmiah yang diinginkan. Karena kompetensi adalah
fitur utama dari kerangka kerja, kerangka kerja kognitif perlu menilai dan melaporkannya di seluruh rentang
kemampuan siswa. Kedalaman Pengetahuan Webb
tingkat menawarkan taksonomi untuk permintaan kognitif yang mengidentifikasi baik permintaan kognitif dari isyarat verbal yang
digunakan (misalnya, menganalisis, mengatur, atau membandingkan) dan kedalaman pengetahuan yang diharapkan yang dibutuhkan.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

110 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Gambar 4.2. Kerangka PISA 2015/2018 untuk permintaan kognitif

Kisi di atas (Gambar 4.2) memberikan kerangka kerja untuk memetakan item terhadap dimensi pengetahuan dan
kompetensi. Selain itu, setiap item juga dapat dipetakan ke dalam dimensi ketiga berdasarkan kedalaman
pengetahuan, yang mengkategorikan permintaan kognitif ke dalam tingkatan berikut:

• Rendah (L)

Melakukan prosedur satu langkah, seperti mengingat fakta, istilah, prinsip atau konsep atau
menemukan satu titik informasi dari grafik atau tabel.

• Sedang (M)

Menggunakan dan menerapkan pengetahuan konseptual untuk mendeskripsikan atau menjelaskan fenomena; memilih
prosedur yang tepat yang melibatkan dua atau lebih langkah; mengatur atau menampilkan data; atau menafsirkan atau
menggunakan kumpulan data atau grafik sederhana.

• Tinggi (H)

Menganalisis informasi atau data yang kompleks; mensintesis atau mengevaluasi bukti; membenarkan; penalaran
diberikan berbagai sumber; mengembangkan rencana atau urutan langkah untuk mendekati suatu masalah.

Jadi, item yang hanya membutuhkan ingatan dari satu bagian informasi membuat tuntutan kognitif yang rendah,
bahkan jika pengetahuan itu sendiri mungkin cukup kompleks. Sebaliknya, item yang memerlukan ingatan lebih dari
satu bagian pengetahuan dan memerlukan perbandingan dan evaluasi yang dibuat dari keunggulan bersaing
relevansinya akan dipandang memiliki permintaan kognitif yang tinggi, bahkan jika pengetahuan itu sendiri relatif
sederhana. Kesulitan

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 111

Oleh karena itu, setiap item merupakan kombinasi dari kompleksitas dan jangkauan pengetahuan yang dibutuhkannya serta operasi
kognitif yang diperlukan untuk memproses pengetahuan ini dan dengan demikian menyelesaikan item tersebut.

Oleh karena itu, faktor utama yang menentukan sulitnya butir penilaian prestasi sains adalah:

• Jumlah dan tingkat kompleksitas elemen pengetahuan yang diminta oleh item;

• Tingkat keakraban dan pengetahuan sebelumnya yang mungkin dimiliki siswa tentang konten, pengetahuan
prosedural dan epistemik yang terlibat;

• Operasi kognitif yang dibutuhkan oleh item (misalnya, mengingat, analisis, evaluasi); dan

• Sejauh mana pembentukan tanggapan bergantung pada model atau gagasan ilmiah abstrak.

Pendekatan empat faktor ini memungkinkan adanya ukuran luas literasi sains di berbagai kemampuan
siswa. Ini relatif sederhana, oleh karena itu diharapkan dapat meminimalkan masalah yang dihadapi dalam
penerapannya. Kerangka kognitif ini juga akan memfasilitasi pengembangan definisi apriori dari parameter
deskriptif skala kecakapan pelaporan (lihat Tabel 4.11).

Karakteristik Uji
Gambar 4.3 menghubungkan komponen dasar kerangka PISA 2018 untuk penilaian literasi ilmiah dengan struktur dan
konten unit penilaian (lihat Gambar 4.1). Sebagai titik awal untuk membangun unit penilaian, hal ini menunjukkan
perlunya mempertimbangkan konteks yang akan dijadikan sebagai materi stimulus, kompetensi yang dibutuhkan untuk
menjawab pertanyaan atau masalah, pusat pengetahuan untuk unit tersebut dan permintaan kognitif.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

112 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Gambar 4.3. Alat untuk membangun dan menganalisis unit dan item penilaian

Unit tes diperkenalkan oleh bahan stimulus khusus, yang mungkin berupa bagian tertulis singkat, atau teks yang
menyertai tabel, bagan, grafik, atau diagram. Pada unit yang baru dibuat untuk PISA 2015 (dan digunakan kembali
dalam PISA 2018), materi stimulus juga dapat mencakup materi stimulus non-statis, seperti animasi dan simulasi
interaktif. Item dalam satu unit diberi skor secara independen. Unit sampel dapat ditemukan di www.oecd.org/pisa/test .

PISA mengelompokkan item ke dalam beberapa unit untuk menggunakan konteks yang serealistis mungkin dan yang
mencerminkan kompleksitas situasi dunia nyata, sembari memanfaatkan waktu pengujian secara efisien. Menggunakan
situasi di mana beberapa pertanyaan dapat diajukan, daripada mengajukan pertanyaan terpisah tentang sejumlah besar
situasi berbeda, mengurangi waktu keseluruhan yang diperlukan bagi siswa untuk menjadi terbiasa dengan materi dalam
setiap pertanyaan. Namun, poin skor (yaitu item) dalam suatu unit harus tetap independen satu sama lain. Lebih lanjut,
karena pendekatan ini mengurangi jumlah konteks penilaian yang berbeda, penting untuk memastikan bahwa ada
cakupan konteks yang memadai untuk meminimalkan bias karena pilihan konteks.

Unit tes PISA 2018 akan membutuhkan penggunaan ketiga kompetensi ilmiah dan memanfaatkan ketiga bentuk pengetahuan
sains. Dalam kebanyakan kasus, setiap unit pengujian akan menilai beberapa

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 113

kompetensi dan kategori pengetahuan. Item individu, bagaimanapun, terutama akan menilai hanya satu bentuk
pengetahuan dan satu kompetensi ilmiah.

Mahasiswa perlu membaca materi stimulus dan soal-soal dalam penilaian literasi sains PISA 2018, oleh karena itu
mengangkat isu bahwa literasi membaca akan dibutuhkan level tertentu untuk menampilkan literasi sains. Untuk
menjawab kekhawatiran tersebut, materi stimulus dan pertanyaan akan menggunakan bahasa yang sejelas,
sederhana, singkat dan sesederhana mungkin secara sintaksis dengan tetap menyampaikan makna yang sesuai.
Jumlah konsep yang diperkenalkan per paragraf akan dibatasi. Pertanyaan dalam domain sains yang secara khusus
menilai membaca atau literasi matematika akan dihindari.

Format respons item

Tiga kelas item akan digunakan untuk menilai kompetensi dan pengetahuan ilmiah yang diidentifikasi dalam
kerangka kerja. Item akan dibagi kurang lebih sama menjadi tiga kelas berikut:

Pilihan ganda sederhana: Item yang diminta

• Pemilihan respons tunggal dari empat opsi; atau

• Pemilihan "hot spot", atau jawaban yang merupakan elemen yang dapat dipilih dalam grafik atau teks.

Pilihan ganda yang kompleks: Item yang diminta

• Tanggapan terhadap serangkaian pertanyaan “Ya / Tidak” terkait yang diperlakukan sebagai satu item untuk tujuan
penilaian (format umum tahun 2006);

• Pemilihan lebih dari satu tanggapan dari daftar;

• Penyelesaian kalimat dengan memilih pilihan drop-down untuk mengisi beberapa kekosongan; atau

• Respons “Tarik dan lepas”, memungkinkan siswa untuk memindahkan elemen di layar untuk menyelesaikan tugas yang
membutuhkan pencocokan, pengurutan, atau pengategorian.

Respons yang dibangun: Item yang meminta respons tertulis atau digambar. Item tanggapan yang dibangun dalam
penilaian keaksaraan ilmiah biasanya memerlukan tanggapan tertulis mulai dari frasa hingga paragraf pendek (yaitu,
dua hingga empat kalimat penjelasan). Sejumlah kecil item respons yang dibangun memerlukan penggambaran,
misalnya, grafik atau diagram. Dalam penilaian berbasis komputer, item seperti itu akan didukung oleh editor gambar
sederhana yang khusus untuk respons yang diperlukan.

Selain itu, dalam PISA 2018, beberapa respons akan ditangkap oleh tugas interaktif, seperti pilihan siswa saat
memanipulasi variabel dalam simulasi penyelidikan ilmiah. Tanggapan untuk tugas interaktif ini akan dinilai
sebagai item pilihan ganda yang kompleks. Beberapa tanggapan untuk tugas interaktif cukup terbuka sehingga
dianggap tanggapan yang dibangun.

Struktur Penilaian
Penilaian berbasis komputer akan kembali menjadi mode utama penyampaian untuk semua domain, termasuk
literasi sains, dalam PISA 2018. Item literasi sains yang baru dikembangkan untuk penyampaian PISA 2015
berbasis komputer hanya akan tersedia dalam penilaian berbasis komputer dalam PISA 2018. Namun,
instrumen penilaian berbasis kertas

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

114 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

(dengan pilihan item yang lebih sedikit) akan disediakan bagi negara yang memilih untuk tidak menguji siswanya di
komputer.

Unit PISA diatur ke dalam bagian 30 menit yang disebut "cluster". Setiap cluster mencakup baik hanya unit baru untuk PISA
2015 atau hanya unit yang telah digunakan dalam siklus PISA sebelumnya, yang dikenal sebagai "unit tren".

Setiap siswa akan diberikan satu formulir tes dua jam. Formulir pengujian terdiri dari empat cluster, masing-masing dirancang untuk
menghabiskan waktu pengujian selama tiga puluh menit. Cluster ditempatkan dalam beberapa formulir pengujian berbasis komputer,
sesuai dengan desain pengujian yang diputar.

Setiap siswa akan menghabiskan total satu jam pada dua kelompok literasi membaca, dengan sisa waktu
ditugaskan ke salah satu atau dua dari domain tambahan sains, matematika, dan kompetensi global. Meskipun
penilaian berbasis kertas akan dibatasi pada item tren dan tidak akan mencakup materi yang baru
dikembangkan, instrumen berbasis komputer akan mencakup item yang baru dikembangkan dan item tren.
Kehati-hatian akan diberikan saat mengubah item tren berbasis kertas ke format di layar sehingga presentasi,
format respons, dan permintaan kognitif tetap sebanding.

Keseimbangan skor-poin yang diinginkan antara tiga jenis pengetahuan (konten, prosedural dan epistemik) dan tiga
kategori pengetahuan konten ditunjukkan pada Tabel 4.9. Pembobotan ini secara luas konsisten dengan kerangka
sebelumnya dan mencerminkan pandangan konsensus di antara para ahli yang berkonsultasi dalam penulisan
kerangka ini.

Tabel 4.9. Target distribusi poin skor menurut jenis pengetahuan dan pengetahuan konten
kategori

Sistem
Jenis pengetahuan Fisik Hidup Bumi & Luar Angkasa Total atas sistem

Kandungan 20-24% 20-24% 14-18% 54-66%

Prosedural 7-11% 7-11% 5-9% 19-31%

Epistemik 4-8% 4-8% 2-6% 10-22%

Total lebih dari jenis pengetahuan 36% 36% 28% 100%

Keseimbangan target skor-poin untuk kompetensi ilmiah diberikan pada Tabel 4.10. Pembobotan ini dipilih
agar penilaian dibagi secara merata antara item yang sebagian besar mengacu pada pengetahuan konten dan
item yang sebagian besar mengacu pada pengetahuan prosedural atau epistemik.

Tabel 4.10. Distribusi target poin skor untuk kompetensi ilmiah

Kompetensi Ilmiah % dari poin skor

Menjelaskan fenomena secara ilmiah 40-50%

Mengevaluasi dan merancang inkuiri ilmiah 20-30%

Menafsirkan data dan bukti secara ilmiah TOTAL 30-40%

100%

Konteks item akan tersebar di seluruh pengaturan pribadi, lokal / nasional dan global kira-kira dalam rasio 1: 2: 1,
seperti yang terjadi pada tahun 2006 ketika sains pertama kali menjadi domain utama penilaian. Berbagai macam
bidang aplikasi akan dipilih, tunduk pada kendala yang diberlakukan oleh distribusi poin skor yang ditunjukkan pada
Tabel 4.9 dan Tabel 4.10.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 115

Skala pelaporan

Perkembangan skala prestasi siswa - atau menjelaskan apa yang dapat dilakukan siswa pada tingkat pencapaian
yang berbeda - penting untuk melaporkan dan membandingkan prestasi siswa di seluruh dunia. Kerangka kerja 2015
(yang menjadi dasar kerangka kerja ini) secara eksplisit mendefinisikan parameter peningkatan kompetensi dan
perkembangan, memungkinkan pengembang item untuk merancang item yang mewakili pertumbuhan kemampuan ini
(Kane, 2006 [ 23]; Mislevy dan Haertel, 2006 [ 24]). Skala tersebut telah diperluas hingga ke Tingkat "1b", yang secara
khusus membahas dan memberikan deskripsi siswa pada tingkat kemampuan terendah. Para siswa ini menunjukkan
bukti literasi ilmiah yang sangat minim dan sebelumnya tidak akan dimasukkan dalam skala pelaporan.

Tabel 4.11. Deskripsi ringkasan dari tujuh tingkat kemahiran dalam sains di PISA 2015

Tingkat Karakteristik tugas

6 Di Level 6, siswa dapat menarik berbagai ide dan konsep ilmiah yang saling terkait dari ilmu fisik, kehidupan dan bumi dan ruang dan

menggunakan konten, pengetahuan prosedural dan epistemik untuk menawarkan hipotesis penjelasan dari fenomena, peristiwa dan proses

ilmiah baru atau untuk membuat prediksi. Dalam menafsirkan data dan bukti, mereka mampu membedakan antara informasi yang relevan dan

tidak relevan dan dapat memanfaatkan pengetahuan di luar kurikulum sekolah normal. Mereka dapat membedakan antara argumen yang

didasarkan pada bukti dan teori ilmiah dan yang didasarkan pada pertimbangan lain. Siswa Level 6 dapat mengevaluasi desain persaingan

dari eksperimen kompleks, studi lapangan, atau simulasi dan membenarkan pilihan mereka.

5 Pada Tingkat 5, siswa dapat menggunakan ide atau konsep ilmiah abstrak untuk menjelaskan fenomena, peristiwa, dan proses yang asing dan lebih

kompleks yang melibatkan banyak hubungan sebab akibat. Mereka mampu menerapkan pengetahuan epistemik yang lebih canggih untuk mengevaluasi

desain eksperimental alternatif dan membenarkan pilihan mereka dan menggunakan pengetahuan teoretis untuk menafsirkan informasi atau membuat

prediksi. Siswa Level 5 dapat mengevaluasi cara-cara mengeksplorasi pertanyaan yang diberikan secara ilmiah dan mengidentifikasi batasan dalam

interpretasi kumpulan data termasuk sumber dan efek ketidakpastian dalam data ilmiah.

4 Pada Level 4, siswa dapat menggunakan pengetahuan konten yang lebih kompleks atau lebih abstrak, yang disediakan atau diingat, untuk membangun

penjelasan tentang peristiwa dan proses yang lebih kompleks atau kurang familiar. Mereka dapat melakukan eksperimen yang melibatkan dua atau lebih

variabel independen dalam konteks terbatas. Mereka mampu membenarkan desain eksperimental, memanfaatkan elemen pengetahuan prosedural dan

epistemik. Siswa Tingkat 4 dapat menginterpretasikan data yang diambil dari kumpulan data yang cukup kompleks atau konteks yang kurang familiar,

menarik kesimpulan yang tepat yang melampaui data dan memberikan justifikasi untuk pilihan mereka.

3 Pada Tingkat 3, siswa dapat memanfaatkan pengetahuan konten yang cukup kompleks untuk mengidentifikasi atau membangun penjelasan tentang fenomena

yang sudah dikenal. Dalam situasi yang kurang familiar atau lebih kompleks, mereka dapat membangun penjelasan dengan isyarat atau dukungan yang relevan.

Mereka dapat memanfaatkan elemen pengetahuan prosedural atau epistemik untuk melakukan eksperimen sederhana dalam konteks terbatas. Siswa tingkat 3

mampu membedakan antara masalah ilmiah dan non-ilmiah serta mengidentifikasi bukti yang mendukung klaim ilmiah.

2 Pada Level 2, siswa mampu memanfaatkan pengetahuan konten sehari-hari dan pengetahuan prosedural dasar untuk mengidentifikasi penjelasan ilmiah

yang sesuai, menafsirkan data, dan mengidentifikasi pertanyaan yang sedang dibahas dalam desain eksperimental sederhana. Mereka dapat

menggunakan pengetahuan ilmiah dasar atau sehari-hari untuk mengidentifikasi kesimpulan yang valid dari kumpulan data sederhana. Siswa level 2

mendemonstrasikan pengetahuan epistemik dasar dengan mampu mengidentifikasi pertanyaan-pertanyaan yang dapat diteliti secara ilmiah.

1a Pada Level 1a, siswa mampu menggunakan pengetahuan dasar atau sehari-hari dan pengetahuan prosedural untuk mengenali atau mengidentifikasi

penjelasan dari fenomena ilmiah sederhana. Dengan dukungan, mereka dapat melakukan penyelidikan ilmiah terstruktur dengan tidak lebih dari dua

variabel. Mereka mampu mengidentifikasi hubungan kausal atau korelasional sederhana dan menafsirkan data grafis dan visual yang membutuhkan

tingkat permintaan kognitif yang rendah. Siswa Level 1a dapat memilih penjelasan ilmiah terbaik untuk data yang diberikan dalam konteks pribadi, lokal

dan global yang familiar.

1b Pada Level 1b, siswa dapat menggunakan pengetahuan ilmiah dasar atau sehari-hari untuk mengenali aspek fenomena yang familiar atau sederhana.

Mereka mampu mengidentifikasi pola sederhana dalam data, mengenali istilah ilmiah dasar, dan mengikuti instruksi eksplisit untuk melaksanakan

prosedur ilmiah.

Sumber: OECD (2016), Hasil PISA 2015 (Volume I): Keunggulan dan Kesetaraan dalam Pendidikan, PISA, OECD Publishing, Paris, http://dx.doi.org/10.1787/9789264266490-en

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

116 │ BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018

Referensi

Asosiasi Amerika untuk Kemajuan Sains (1989), Sains untuk Semua Orang Amerika, [5]

Oxford University Press, New York,

http://www.project2061.org/publications/sfaa/online/sfaatoc.htm .

Bloom, B. (ed.) (1956), Taksonomi Tujuan Pendidikan, Buku 1: Domain Kognitif, [21]

Penerbitan Longmans.

Brennan, R. (ed.) (2006), Validasi, Praeger Publishers dan American Council on [23]

Pendidikan.

Brookhart, S. dan A. Nitko (2011), “Strategi untuk membangun penilaian tingkat tinggi [20]

kemampuan berpikir", Penilaian Keterampilan Berpikir Tingkat Tinggi, hlm. 327-359.

COSCE (2011), Informe ENCIENDE, Enseñanza de las Ciencias en la Didáctica Escolar para [6]

edades tempranas en España, Confederación de Sociedades Científicas de España, Madrid,

https://www.cosce.org/pdf/Informe_ENCIENDE.pdf .

Davis, S. dan C. Buckendahl (2011), “Memasukkan permintaan kognitif dalam kredensial [19]

ujian ”, Penilaian Keterampilan Berpikir Tingkat Tinggi, hlm. 327-359.

Duschl, R. (2008), “Pendidikan Sains dalam Tiga Bagian Harmoni: Menyeimbangkan Konseptual, [14]

Epistemik, dan Tujuan Pembelajaran Sosial ”, Review of Research in Education, Vol. 32/1, hlm.268-
291, http://dx.doi.org/10.3102/0091732x07309371 .

Fensham, P. (1985), "Sains untuk semua: Esai reflektif", Jurnal Studi Kurikulum, [7]

Vol. 17/4, hlm. 415-435, http://dx.doi.org/10.1080/0022027850170407 .

Kuhn, D. (2010), "Mengajar dan mempelajari sains sebagai argumen", Pendidikan sains, Vol. 94/5, [17]

hlm. 810-824, http://dx.doi.org/10.1002/sce.20395 .

Longino, H. (1990), Sains sebagai Pengetahuan Sosial, Princeton University Press, Princeton. [16]

Millar, R. et al. (1994), “Investigasi di laboratorium sains sekolah: konseptual dan [12]

pengetahuan prosedural dan pengaruhnya terhadap kinerja ”, Makalah Penelitian dalam Pendidikan,
Vol. 9/2, hlm. 207-248, http://dx.doi.org/10.1080/0267152940090205 .

Millar, R. dan J. Osborne (eds.) (1998), Beyond 2000: Pendidikan Sains untuk Masa Depan, Sekolah [8]

Pendidikan, King's College London,

http://www.nuffieldfoundation.org/sites/default/files/Beyond%202000.pdf.

Kementerian Pendidikan, Tionghoa Taipei (1999), Kurikulum Sekolah Menengah Atas Umum, Kementerian [11]

situs web Pendidikan, http://www.k12ea.gov.tw .

Mislevy, R. dan G. Haertel (2006), “Implikasi desain berpusat pada bukti untuk pendidikan [24]

pengujian ", Pengukuran Pendidikan: Masalah dan Praktek, Vol. 25/4, hlm.6-20.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 BAB 4. KERANGKA ILMU PENGETAHUAN PISA 2018 │ 117

Dewan Riset Nasional (2012), Kerangka untuk Pendidikan Sains K-12: Praktik, [9]

Konsep Crosscutting, dan Ide Inti, The National Academies Press, Washington, DC,
https://doi.org/10.17226/13165 .

OECD (2006), Menilai Literasi Ilmiah, Membaca dan Matematika: Sebuah Kerangka untuk PISA [3]

2006, PISA, OECD Publishing, Paris, https://dx.doi.org/10.1787/9789264026407-en .

OECD (2003), Kerangka Kerja Penilaian PISA 2003: Matematika, Membaca, Sains dan [2]

Pengetahuan dan Keterampilan Pemecahan Masalah, PISA, OECD Publishing, Paris,

https://dx.doi.org/10.1787/9789264101739-en .

OECD (1999), Mengukur Pengetahuan dan Keterampilan Siswa: Kerangka Baru untuk Penilaian, [1]

Penerbitan OECD, Paris, https://dx.doi.org/10.1787/9789264173125-en .

Osborne, J. (2010), “Berdebat untuk Belajar dalam Sains: Peran Kolaboratif, Kritis [18]

Ceramah", Ilmu, Vol. 328/5977, hlm.463-466, http://dx.doi.org/10.1126/science.1183944 .

Roberts, R., R. Gott dan J. Glaesser (2010), “Pendekatan siswa untuk sains terbuka [13]

investigasi: pentingnya pemahaman substantif dan prosedural ”, Makalah Penelitian dalam Pendidikan, Vol. 25/4,
hlm.377-407, http://dx.doi.org/10.1080/02671520902980680 .

Rychen, D. dan L. Salganik (eds.) (2001), Definisi dan Pemilihan Kompetensi Kunci, [4]

Situs web OECD, http://www.oecd.org/pisa/35070367.pdf .

Ständige Konferenz der Kultusminister der Länder in der Bundesrepublik Deutschland (2005), [10]

Beschlüsse der Kultusministerkonferenz: Bildungsstandards im Fach Biologie für den Mittleren

Schulabschluss (Jahrgangsstufe 10), Wolters Kluwer Deutschland GmbH, München, Neuwied,

https://www.kmk.org/fileadmin/Dateien/veroeffentlichungen_beschluesse/2004/2004_12_16Bildungsstandards-Biologie.pdf
.

Webb, N. (1997), Kriteria untuk Penyelarasan Harapan dan Penilaian dalam Matematika dan [22]

Pendidikan sains, Institut Nasional untuk Pendidikan Sains, Washington, DC

Ziman, J. (1978), Pengetahuan yang Andal: Eksplorasi Landasan Kepercayaan pada Sains, [15]

Cambridge University Press, Cambridge.

PENILAIAN PISA 2018 DAN KERANGKA ANALITIS © OECD 2019

 Dari:

Penilaian PISA 2018 dan Kerangka Analisis

Akses publikasi lengkap di:

https://doi.org/10.1787/b25efab8-en

Harap kutip bab ini sebagai:

OECD (2019), “PISA 2018 Science Framework”, di Penilaian PISA 2018 dan Kerangka Analisis,
OECD Publishing, Paris.

DOI: https://doi.org/10.1787/f30da688-en

Karya ini diterbitkan di bawah tanggung jawab Sekretaris Jenderal OECD. Pendapat yang dikemukakan dan argumen yang digunakan di sini tidak
mencerminkan pandangan resmi negara-negara anggota OECD.

Dokumen ini dan peta apa pun yang termasuk di sini tidak mengurangi status atau kedaulatan atas wilayah mana pun, dengan batasan batas dan batas
internasional dan dengan nama wilayah, kota, atau wilayah mana pun.

Anda dapat menyalin, mengunduh, atau mencetak konten OECD untuk Anda gunakan sendiri, dan Anda dapat menyertakan kutipan dari publikasi OECD, database, dan
produk multimedia dalam dokumen, presentasi, blog, situs web, dan materi pengajaran Anda sendiri, asalkan pengakuan yang sesuai atas OECD sebagai sumber dan
pemilik hak cipta diberikan. Semua permintaan untuk penggunaan publik atau komersial dan hak terjemahan harus diserahkan ke rights@oecd.org. Permintaan izin
untuk memfotokopi bagian dari materi ini untuk penggunaan umum atau komersial harus ditujukan langsung ke Pusat Izin Hak Cipta (CCC) di info@copyright.com atau
Centre français d'exploitation du droit de copie (CFC) di contact @ cfcopies .com.