Desain dan Validasi Protokol Observasi Kelas STEM Anak Usia Dini Todd
Milford
Christine Tippett
Universitas Ottowa, Kanada
Abstrak
Di seluruh pendidikan K-12, baru-baru ini ada perhatian pada kesempatan belajar yang tersedia bagi siswa
dalam pembelajaran sains, teknologi, teknik, dan matematika (STEM). Pendidikan anak usia dini (ECE) telah
dikeluarkan dari proses ini. Literatur ilmiah berisi bukti yang baik untuk memasukkan pengajaran dan
pembelajaran sains di tingkat ECE, namun, saat ini hanya sedikit yang diketahui tentang bagaimana
kurikulum STEM terbaik diimplementasikan di tahun-tahun awal. Selain itu, alat pengumpulan data yang
dikembangkan khusus untuk ECE STEM terbatas. Dalam makalah ini, kami menguraikan langkah-langkah
yang telah kami ambil untuk merancang dan memvalidasi protokol observasi kelas (COP) yang dimaksudkan
untuk menangkap aspek instruksi STEM dalam pengaturan anak usia dini dan untuk membantu pendidik
membayangkan dan menyesuaikan praktik mengajar mereka sendiri.
Kata kunci: STEM, pendidikan anak usia dini, pendidikan Pra-TK, Protokol Observasi Kelas, alat
pengumpulan data, pengembangan dan validasi
pengantar
Artikel ini melaporkan studi tentang cara-cara untuk memeriksa implementasi kurikulum sains, teknologi,
teknik dan matematika pada tahun-tahun awal. Dewan Penelitian Nasional Amerika Serikat (NRC, 2011)
telah mengidentifikasi tiga tujuan luas untuk STEM: peningkatan pelatihan lanjutan dan karier di bidang
STEM; perluasan tenaga kerja berkemampuan STEM; dan peningkatan literasi ilmiah di kalangan
masyarakat umum. STEM akronim kadang-kadang digunakan untuk merujuk pada salah satu dari disiplin
individu, kadang-kadang untuk menunjukkan integrasi keempat disiplin ilmu, dan kadang-kadang berarti
kombinasi dari dua atau lebih dari disiplin ilmu (Akademi Teknik Nasional dan Dewan Riset Nasional, 2014) ).
Perspektif kami, dibagikan oleh spesialis anak usia dini lainnya (lih, Moomaw, 2013),
Salah satu tujuan utama pendidikan adalah untuk membangun lingkungan yang mendukung penghargaan untuk pembelajaran seumur
hidup; dengan demikian, pertanyaan penting yang perlu diajukan adalah jenis pengalaman seperti apa dalam pendidikan anak usia dini
(ECE) yang dapat menumbuhkan sifat seperti itu pada anak-anak (Katz, 2010). Ada saran bahwa STEM di tingkat anak usia dini, jika
didekati dengan benar, dapat menawarkan kesempatan bagi guru untuk melibatkan anak-anak dalam kegiatan yang memanfaatkan minat,
pengalaman, dan pengetahuan siswa sebelumnya (NRC, 2011). Dalam artikel ini kami secara singkat membuat kasus untuk memasukkan
STEM dalam ECE, menggambarkan sebuah proyek di mana kami mengamati implementasi dan efek dari kurikulum STEM Pra-Taman
Kanak-Kanak (Pra-K), dan kemudian menjelaskan pengembangan alat pengumpulan data yang memfasilitasi pengamatan kami.
(Perhatikan bahwa Pra-TK dan Pra-K adalah istilah yang digunakan di seluruh Amerika Utara untuk menggambarkan program pendidikan
formal untuk anak-anak yang berusia empat tahun. Di tempat lain, pendidikan Pra-K dapat disebut TK TK). Pengumpulan data ini
Alat ini dapat digunakan untuk membantu para pendidik anak usia dini dalam penilaian reguler pengajaran dan pembelajaran.
- komponen ECE yang dibangun di atas minat bawaan siswa di dunia alami, dapat membantu mengembangkan sikap positif
terhadap disiplin, dan dapat memberikan landasan di mana pembelajaran dan pemahaman lebih lanjut dapat dibangun.
Secara keseluruhan tampaknya ada bukti kuat untuk memasukkan sains dalam ECE, tetapi bagaimana dengan memasukkan STEM?
Meskipun pengalaman anak usia dini mempengaruhi keberhasilan akademik kemudian (Human Learning Early Partnership, 2009) dan
kemungkinan pengalaman ECE STEM yang berkualitas akan mengarah pada keberhasilan akademis di masa depan, perhatian terhadap
pendidikan STEM masih cenderung difokuskan pada tingkat sekolah menengah dan menengah. kisaran K-12, baik dalam literatur maupun
di ruang kelas. Namun demikian, ada beberapa dokumen terbaru yang membahas hubungan antara sains dan pendidikan STEM yang
telah memengaruhi pekerjaan kami yang berkelanjutan di bidang ini. Pertama, Pernyataan Sikap Pendidikan Anak Usia Dini ( National
Science Teachers Association, NSTA, 2014), yang berfokus pada anak-anak dari tiga tahun hingga prasekolah, menggambarkan kapasitas
anak-anak untuk terlibat dalam proses sains dan mengembangkan pemahaman konseptual, peran penting yang dimainkan orang dewasa
dalam berkontribusi pada pengalaman awal ini, beragam peluang yang bisa didapat dari pengalaman seperti itu pada tingkat ini dan waktu
yang dibutuhkan untuk mencapai tujuan tersebut. Pernyataan NSTA berfokus pada kecenderungan anak-anak untuk mengamati,
mengeksplorasi, dan menemukan dunia yang dikelilingi oleh mereka dan menegaskan bahwa pembelajaran sains dan praktik-praktik
teknik menumbuhkan kesenangan, keingintahuan, dan meletakkan dasar bagi perkembangan pembelajaran sains melalui seluruh hidup
mereka. Secara khusus, pernyataan posisi (NSTA, 2014) menunjukkan bahwa belajar sains dan praktik rekayasa di tahun-tahun awal (i)
rasa ingin tahu menumbuhkan anak-anak dan kenikmatan dalam menjelajahi dunia di sekitar mereka, dan (ii) meletakkan dasar untuk
belajar ilmu di K-12 pengaturan. Dokumen kedua kami direferensikan adalah Berikutnya Ilmu Standar Generation (NGSS, Mencapai,
2013) yang didasarkan pada Kerangka K-12 Pendidikan Ilmu: Praktek, lintas sektor Konsep dan Core Gagasan ( NRC, 2012). Itu NGSS
memengaruhi pekerjaan kami dalam dua cara. Pertama, ia dengan jelas mengidentifikasi dan menggambarkan ide-ide utama
pendidikan sains K-12 (yaitu, bahwa sains adalah serangkaian praktik penyelidikan kognitif, sosial, dan fisik, yang melibatkan
konsep-konsep yang melintasi berbagai topik sains - seperti pola atau perubahan - serta pengetahuan konten inti). Kedua, ini
mengintegrasikan pemahaman ide-ide sains dengan keterlibatan dalam praktik sains dan menawarkan tempat yang menonjol
untuk ide-ide dan praktik teknik. Lebih khusus itu NGSS menguraikan tiga dimensi di mana pendidikan sains dan STEM dapat
diintegrasikan: (i) praktik sains dan teknik: penyelidikan dan masalah
pemecahan (desain); (Ii) konsep cross-cutting: ide-ide yang mendasari kunci yang umum untuk sejumlah topik; dan (iii) gagasan
inti: konten yang spesifik dan bidang studi (Mencapai, 2013). Kedua NSTA (2014) pernyataan sikap dan NGSS ( Mencapai,
2013) jelas menekankan aspek rekayasa dalam dan di samping instruksi ilmu pengetahuan. Ketika penekanan ini dianggap,
bersama dengan kategorisasi matematika sebagai daerah dasar di semua tingkat pendidikan termasuk anak usia dini (cf.,
BCME 2008, OME, 2010), semua yang tersisa adalah penambahan teknologi untuk mengembangkan STEM di awal tingkat
kanak-kanak. lompatan akhir ini tidak terlalu besar bila kita menganggap bahwa teknologi dalam diskusi ini lebih dari teknologi
komunikasi informasi dan termasuk alat yang digunakan untuk memecahkan masalah.
Tujuan dari penelitian kami adalah untuk menyelidiki bagaimana pendidikan STEM mungkin diterapkan secara efektif dalam
lingkungan belajar anak usia dini, sementara menyoroti manfaat dan tantangan. Studi ini mencakup perspektif penelitian tindakan,
dengan pendidik yang berpartisipasi merefleksikan kurikulum STEM mereka saat ini dan bertindak atas pertanyaan pribadi yang
bermakna. tujuan utama meliputi:
• mengumpulkan data dalam Pra-K lingkungan belajar untuk lebih memahami desain, pengiriman, dan tantangan
pendidikan STEM pada tingkat ini;
• menentukan daerah untuk target untuk perbaikan kurikulum STEM Pre-K; dan
• mengembangkan saran untuk melaksanakan pemrograman STEM di ECE.
Seperti halnya di semua penelitian, alat pengumpulan data yang tepat merupakan komponen penting dari penelitian ini. Namun,
meskipun protokol observasi ada untuk mengajar STEM, seperti Kualitas Elektronik Penyelidik Protocol (EQUIP, Marshall,
Horton, & White, 2009) dan untuk lingkungan kelas ECE, seperti Kelas Penilaian Scoring System (CLASS, Le Paro, Pianta , &
Stuhlman, 2004) dan ada literatur yang tersedia tentang cara untuk pergi tentang memilih dan / atau menggunakan alat tersebut
(misalnya, Institut Pendidikan Layanan, 2009;. Le Paro et al, 2004;. Marshall et al, 2009), ada ada yang bisa kami temukan
dalam literatur yang berfokus pada tumpang tindih antara pembelajaran STEM dan lingkungan belajar ECE. Jadi, kami
memutuskan untuk menarik literatur difokuskan pada STEM dengan siswa yang lebih tua (misalnya, Brown, 2012), pendidikan
anak usia dini (misalnya, Le Paro, Pianta,
2004), atau ilmu anak usia dini (misalnya, Trundle & Saçkes, 2012) untuk merancang dan memvalidasi protokol observasi kelas
(COP) yang dapat kita gunakan dalam proyek penelitian kami, dan itu juga akan berguna sebagai alat penilaian untuk guru ECE.
Membandingkan dua kerangka ECE ini, kami mengidentifikasi lima aspek lingkungan belajar yang efektif awal yang umum
untuk keduanya, yang akan relevan untuk pendidikan STEM, dan yang akan diintegrasikan ke dalam COP. Aspek-aspek
dan deskripsi mereka dalam dua dokumen ditunjukkan pada Tabel 1.
Tabel 1 Aspek Pendidikan Anak Usia Dini yang relevan untuk STEM Pendidikan
Menjelajahi dan • secara aktif mengeksplorasi, berpikir dan alasan • mengeksplorasi objek dan peristiwa dan
Mengamati • menjelajahi dunia menggunakan semua indera mengamati hasil eksplorasi
mereka • melakukan pengamatan, menggunakan semua indra
mereka, dan menghasilkan pertanyaan
berkomunikasi • mengembangkan kemampuan bahasa yang beragam • bekerja secara individual dan dengan orang lain, dan
dan berkomunikasi dengan orang lain berbagi dan mendiskusikan ide-ide melalui berbicara,
mendengarkan, menulis
bermain • bermain adalah penting untuk perkembangan • konten dipelajari melalui bermain,
yang sehat anak-anak dan belajar investigasi, dan pengajaran disengaja
kelima aspek membentuk dasar untuk COP ECE STEM kami. Itu NGSS ( Mencapai, 2013), yang ELF ( BCME, 2008), dan ELK ( OME,
2010) memberikan kontribusi untuk pengembangan kami ukuran
untuk setiap aspek dan dari indikator yang akan memberikan bukti dimensi seperti mereka berlaku dalam kelas
ECE. Kami juga banyak mengambil protokol EQUIP (Marshall et al.,
2009) dan dimanfaatkan bahan dari Anak Usia Dini Hands-On Science (ECHOS ®), kurikulum ilmu yang menekankan konsep dasar
ilmu pengetahuan dan keterampilan proses sains (Patricia dan Phillip Frost Museum of Science, PPFMS 2014). Selain itu, kami
mengacu pada dokumen kurikulum sains provinsi dari British Columbia dan Ontario. Misalnya, untuk aspek Play, kita menarik
langsung dari kedua ELF ( BCME, 2008) dan ELK ( OME, 2010) dokumen, menggunakan frase kunci dalam COP. Frase seperti berkomunikasi
dengan berbicara, mendengarkan dan menulis; mengeksplorasi mengenali, menjelaskan dan membuat pola; menggunakan
masalah teknologi pemecahan dan mendiskusikan ide-ide, berbagi temuan semua terintegrasi langsung ke COP.
Menggunakan dokumen-dokumen ini dan mempertimbangkan realitas lingkungan kelas, kami merancang
COP awal untuk belajar STEM di tingkat anak usia dini. Proses memutus aspek, dimensi, dan indikator
adalah sebagai berikut:
• Mengamati itu dimasukkan oleh aspek Keterampilan Proses yang pada gilirannya dipengaruhi oleh
ECHOS (PPFMS, 2014) dan disahkan oleh perbandingan dengan dua dokumen kurikulum provinsi.
• Aspek keempat, Ilmiah dan Teknik Praktek, ditambahkan ke COP dan dimensi yang tepat untuk
aspek ini diadaptasi dari ekspektasi kinerja K-2 dari NGSS ( Mencapai, 2013). Kami ingin
membedakan antara keterampilan proses dan ilmu pengetahuan dan teknik praktik sehingga COP
dapat digunakan untuk kedua pengamatan ilmu pengetahuan dan STEM.
Pada tahap ini, COP terdiri dari empat aspek, 16 dimensi, dan tiga sampai lima indikator untuk setiap dimensi. Untuk
konsistensi dan kemudahan penggunaan, kami kental jumlah indikator sehingga ada tiga untuk setiap dimensi. Misalnya,
dimensi Memprediksi dalam aspek Keterampilan Proses diambil dari ECHOS (PPFMS, 2014) dan awalnya terdiri dari lima
indikator: verbalisasi berpikir, mengakui dan meluas pola, membuat prediksi sederhana, membuat prediksi berdasarkan
pengamatan,
dan menggunakan perkiraan untuk membuat prediksi kuantitatif. Karena kita sudah punya dimensi Mengamati, kami mengurangi
jumlah indikator untuk empat: verbalisasi berpikir, mengakui dan meluas pola, membuat prediksi sederhana, dan menggunakan
perkiraan untuk membuat prediksi kuantitatif. Kemudian, karena konsep kualitatif dan kuantitatif sudah dibahas dalam dimensi
Berpikir Matematika dan Komputasi, dan Berkomunikasi dimasukkan verbalisasi berpikir, kita kemudian dikurangi jumlah indikator
untuk dua:
mengenali dan memperluas pola, dan membuat prediksi sederhana. Indikator ketiga untuk dimensi Memprediksi, membandingkan
prediksi untuk apa yang sebenarnya terjadi, berasal dari NGSS ( Mencapai, 2013). Kami dikemudikan COP awal kami dan
disempurnakan untuk kejelasan, item menambahkan bahwa penggunaan kelas disarankan harus dimasukkan, dan indikator
dihapus yang diduplikasi di dimensi. Setelah piloting, kami menambahkan nomor kode untuk masing-masing indikator untuk
meningkatkan kegunaan dari COP, membuat pengamatan lebih efisien karena hanya kode akan perlu dicatat, daripada deskripsi
indictor tersebut. Kemudahan penggunaan adalah penting karena harapan kami COP adalah bahwa itu bisa dan akan digunakan
secara real time (yaitu, sementara instruksi sedang berlangsung). COP saat ini, yang masih dalam tahap percobaan dan tidak
boleh digunakan tanpa izin tertulis dari penulis, alamat empat aspek (misalnya, ilmiah dan praktek-praktek rekayasa) dengan
masing-masing aspek yang terdiri dari dua atau lebih dimensi (misalnya, argumen) . Selain itu, masing-masing dimensi memiliki
tiga indikator atau jenis perilaku terpisah yang kemungkinan menunjukkan dimensi hadir (misalnya, perjanjian menunjukkan atau
ketidaksetujuan berdasarkan bukti). Aspek Proses Keterampilan COP untuk kelas ECE disajikan pada Tabel 2.
Mengkomunikasikan
berkomunikasi
informasi atau ide-ide desain + / Sharing, mendengarkan, dan hasil berkomunikasi
atau solusi dalam mendiskusikan ide-ide dan temuan
lisan + / atau bentuk tertulis
protokol observasi kelas kami dimaksudkan untuk membantu dalam presisi dan akurasi menangkap perilaku
kelas anak usia dini, dan karena itu harus praktis untuk digunakan oleh pendidik anak usia dini, peneliti, dan
asisten peneliti (RA). Kami ingin menciptakan COP yang membutuhkan minimal 'pelatihan' sehingga user
friendly dan kelas siap; guru akan dapat menggunakannya tanpa pelatihan yang ekstensif bahwa beberapa
COP lainnya memerlukan. Misalnya, KELAS membutuhkan pelatihan intensif sebelum uji reliabilitas diambil
oleh pengumpul data (Le Paro et al., 2004). Langkah-langkah awal mengembangkan COP ini terlibat baik
dari para peneliti melalui serangkaian sesi di kelas Pra K menciptakan, piloting, mengedit, dan re-pengujian
alat.
Kami meminta para pendidik anak usia dini untuk menggunakan COP bersama dengan template perencanaan pelajaran paralel
(lihat Gambar 1) yang menyoroti dimensi dan indikator pelajaran dimaksudkan untuk menunjukkan. Kami juga meminta para
pendidik untuk merefleksikan rencana pelajaran mereka menggunakan template paralel. Ada resistensi awal untuk penggunaan
COP dari satu pendidik, karena pendekatan yang lebih disukai nya data kelas mengumpulkan adalah catatan berjalan anekdot.
Dia juga menyatakan rasa ketidaknyamanan yang timbul dari anak-anak 'memaksa' ke dalam tindakan dan perilaku yang
dijelaskan dalam COP. Namun, setelah kami menekankan bahwa COP diikat langsung ke kedua perencanaan pelajaran dan
pelajaran refleksi template, dan diperkuat bahwa alat ini hanya observasional, dengan penggunaannya melengkapi daripada
mengganti rekaman anekdot, dia bersedia untuk mencoba COP dan perencanaan Template.
Kemungkinan tantangan:
Post-Mengajar Refleksi
Bagaimana pelajaran pergi: Bukti:
Bukti dari ( Indikator) selama instruksi STEM Dimensi yang sebenarnya berlaku
Perubahan make rencana pelajaran dan instruksi ( misalnya, untuk membangun kekuatan tak terduga atau alamat mencatat tantangan):
Hal terbaik ( hanya satu!) yang saya lihat atau berpikir tentang pelajaran ini:
Setelah keengganan awal ini, umpan balik dari pendidik awal penggunaan COP (dikombinasikan dengan pelajaran dan refleksi
template) adalah positif. Kedua pendidik sangat senang dengan hubungan antara COP dan template pelajaran refleksi sebagai
manfaat dari hubungan ini (yaitu, waktu dikurangi dalam pelajaran perencanaan dan menyelesaikan template pelajaran refleksi,
kemampuan untuk dengan cepat perilaku capture kelas) menjadi segera jelas kepada mereka. Bahkan, ketika diminta untuk
berbicara tentang COP, para pendidik berkomentar bahwa “Itu sangat membantu dalam [kami] perencanaan dan penilaian dari
kegiatan [yang kami lakukan di dalam kelas]. Itu kaya dan tidak rumit untuk digunakan setelah kami menjadi nyaman dengan itu.
Nomor untuk identifikasi dimensi dan aspek berguna. ”Mereka juga berkomentar bahwa“Ini membantu kami mengidentifikasi dan
nama skill STEM bahwa anak-anak menunjukkan dan atribut-atribut yang kita cari. Ini membantu kami untuk menjadi lebih
disengaja dengan perencanaan kita. Ini memberi kami peta jalan untuk penilaian.”
Dalam upaya untuk meningkatkan presisi dan akurasi penggunaan COP di kelas untuk pendidik anak usia dini dengan rencana
dan mengevaluasi pelajaran mereka, serta memungkinkan digunakan oleh peneliti lain, kami mengembangkan deskriptor dan
eksemplar dari apa indikator ini mungkin terlihat seperti dalam praktek. Kemudahan penggunaan COP ditingkatkan ketika semua
anggota tim peneliti disediakan dengan deskriptor singkat dan examplars untuk setiap indikator. Contoh dari aliran dari aspek ke
eksemplar untuk masing-masing empat aspek ditunjukkan pada Tabel 3.
tabel 3 Deskriptor sampel dan Teladan untuk Indikator pada COP ECE STEM
Keterampilan pengkategorian PS-8 Sorting objek ke dalam Tombol dapat diurutkan berdasarkan bentuk, tetapi juga
proses kelompok menggunakan satu oleh warna, jumlah lubang, material, dll
atau lebih atribut
NGSS Argumen SEP-14 Menunjukkan Seorang mahasiswa setuju atau tidak setuju dengan klaim
ilmiah dan persetujuan atau ketidaksetujuan dan secara eksplisit mengacu pada pengalaman sebelumnya
berdasarkan bukti yang relevan ( "Saya setuju bahwa objek ini akan mengapung
Teknik karena licin dan penuh lubang seperti spons, dan spons
Praktek melayang")
Langkah kami berikutnya adalah proses validasi yang ditujukan validitas dan reliabilitas dari COP. Kami perlu untuk
mengidentifikasi dimensi dan indikator diperlukan revisi dan yang deskriptor diperlukan menulis ulang. Melalui proses ini
kami juga akan dapat menentukan apakah proses pelatihan cukup untuk masa depan skala-up.
Dengan validitas COP didirikan, properti dasar kedua pengukuran empiris (reliabilitas) harus ditentukan (Watkins &
Pacheco, 2000). Dalam hal ini, reliabilitas antar penilai (IRR) adalah perhitungan yang tepat. Namun, ada sedikit konsensus
tentang ukuran statistik terbaik untuk menentukan IRR untuk COP meskipun kesepakatan bahwa kehandalan sangat
penting untuk pengembangan dan bahwa itu dituntut oleh lembaga pendanaan (Rui, 2009). Menghadapi kurangnya
konsensus, kami memilih koefisien kappa Cohen (κ) sebagai ukuran kami IRR karena membandingkan perjanjian yang
diamati antara dua penilai dengan kesepakatan yang diharapkan secara kebetulan saja (Hallgren,
2012) yang membuat perhitungan sangat tepat diberikan proses validasi kami, yang melibatkan coding klip
video dengan beberapa anggota tim peneliti.
Untuk menghitung IRR kami video yang direkam dua pelajaran STEM di kelas Pre-K dan kemudian tersegmentasi rekaman ke
dalam sembilan klip pendek. Sembilan klip diikuti istirahat alami dan transisi dalam pelajaran dan sekitar lima menit. Kami
ditugaskan enam klip video yang berbeda untuk masing-masing anggota tim peneliti, memastikan bahwa setiap klip diberi kode
empat kali, seperti yang ditunjukkan pada Tabel 4. Selain itu, masing-masing penilai kode klip yang sama karena masing-masing
rating lain setidaknya tiga kali untuk memungkinkan pairways perbandingan. Sebagai contoh, kedua Peneliti 1 dan Peneliti 2 kode
Klip 1, 2, dan 9.
tabel 4 penugasan V ideo Klip untuk Menghitung Keandalan COP ECE STEM
V ideo Cl aku p
Penilai 1 2 3 4 5 6 7 8 9
Peneliti 1 X X X X X X
Peneliti 2 X X X X X X
ECE Guru 1 X X X X X X
ECE Guru 2 X X X X X X
Research Assistant 1 X X X X X X
Research Assistant 2 X X X X X X
Kami meneliti kesepakatan antara pasangan penilai pada setiap klip video. Pendekatan kami adalah untuk membandingkan
keandalan pengamat di semua 48 indikator dalam COP dan untuk menghitung nilai κ untuk setiap pasangan. Misalnya, untuk
setiap terjadinya suatu penilai indikator bisa (i) memilih indikator yang sama, (ii) memilih ada indikator, (iii) penilai A bisa
memilih indikator bila penilai B tidak, atau (iv) rater B bisa memilih indikator bila penilai A tidak. Untuk memudahkan pairways
perbandingan, kita memecahkan klip video ke dalam 10 segmen kedua, ditentukan contoh perjanjian penilai untuk setiap
segmen, dan kemudian mencapai contoh. Misalnya, Peneliti 1 dan RA 2 memiliki hasil sebagai berikut: (i) baik penilai
menunjukkan kode yang sama 17 kali, (ii) kedua penilai tidak menunjukkan 4 kali, (iii) penilai A ditunjukkan 1 kali ketika tingkat
B tidak, dan (iv) rater B ditunjukkan 6 kali ketika penilai A tidak. Dengan menggunakan data ini kita akan dapat menghitung
kesepakatan persentase serta κ antara semua set penilai. Hasil awal dari perbandingan disediakan pada Tabel 4.
tabel 4 Keluaran parsial untuk COP Rater Seleksi Tugas untuk Individu video
Klip penilai #
video Perjanjian Jumlah Tugas% kesepakatan Kappa ( κ)
Research Assistant 2
Terlepas dari kenyataan bahwa κ belum dihitung untuk sisa video coding, sebuah pernyataan umum beberapa pada
keandalan COP dapat dibuat. Misalnya, perkiraan kasar dari persentase perjanjian (yaitu, dinyatakan sebagai jumlah
perjanjian dalam pengamatan dibagi dengan jumlah total pengamatan) dihitung selama dua penilai di video pertama
pada 75%. Selain itu, κ bagi mereka set yang sama penilai adalah 0,40. Interpretasi κ sangat mudah karena
membutuhkan bentuk koefisien korelasi umum (yaitu, kisaran dibatasi dari 1 ke -1). Nilai-nilai kurang dari 0,40 miskin,
nilai-nilai 0,40-0,60 menyarankan kesepakatan yang adil, nilai-nilai 0,60-0,75 mewakili kesepakatan yang baik, dan
nilai-nilai yang lebih besar dari 0,75 menunjukkan kesepakatan yang sangat baik (Watkins & Pacheco, 2000). Semua
perhitungan untuk kesepakatan% dan κ akan dilakukan seperti di atas,
Apa yang mungkin lebih menarik dari seberapa sering kode penilai sepakat adalah daerah di mana perbedaan coding
yang diamati. Daerah muncul bermasalah (yaitu, mungkin memerlukan revisi COP atau lebih memperhatikan pelatihan)
berada dalam aspek Questioning (misalnya, berbagai keperluan dibandingkan tingkat pertanyaan) dan Keterampilan
Proses (misalnya, prediksi sederhana dibandingkan mengkomunikasikan informasi) dan antara indikator dalam aspek
Keterampilan Bermain dan Proses (misalnya, melakukan pengamatan dengan menggunakan semua indera
dibandingkan memperhatikan persamaan dan perbedaan). Analisis segmen yang lebih kecil membantu untuk bantuan
dalam identifikasi kita indikator bermasalah, misalnya, daerah tumpang tindih baik di dalam dan antara aspek COP.
rencana kami untuk memperbaiki COP ECE STEM termasuk menangani semua bidang di mana IRR rendah,
diadaptasi dari sejumlah publik, kebijakan, dan dokumen pemerintah terkait dengan pendidikan ilmu pengetahuan, pendidikan
STEM, dan ECE. Kami merancang COP berdasarkan dokumen yang (i) yang baru-baru ini dalam sastra sekitar ilmu pengetahuan
dan STEM pendidikan, (ii) yang relevan dengan lokasi geografis penelitian, dan (iii) pedoman ditawarkan untuk menilai lingkungan
ECE. Tujuannya adalah agar COP akan menjadi penelitian dan pengajaran alat yang layak, membantu peneliti dalam
mengumpulkan data dan membantu pendidik anak usia dini untuk merencanakan, melaksanakan, dan merefleksikan praktek STEM
mereka. Ada argumen ekonomi yang jelas untuk pemrograman STEM ECE efektif sebagai negara berusaha untuk bersaing dalam
ekonomi pengetahuan; Namun, pentingnya pemrograman yang efektif harus melampaui ekonomi. pendidikan STEM bukan hanya
bagi siswa yang akan melanjutkan pendidikan pasca sekolah menengah atau karir di bidang yang berhubungan STEM. Sebuah
populasi dengan sebuah yayasan di STEM akan lebih siap untuk menghadapi tantangan dari ilmu pengetahuan dan teknologi
didorong masyarakat (NRC, 2011).
References
Achieve, Inc. (2013). Next generation science standards. Washington, DC: The National Academies Press.
British Columbia Ministry of Education (BCME). (2005). Science K to 7: Integrated resource package
2005. Retrieved from http://www.bced.gov.bc.ca/irp/pdfs/sciences/2005scik7.pdf British Columbia Ministry of Education
Education (BCME). (2009). Understanding the British Columbia early learning framework: From theory to practice. Retrieved
from
http://www2.gov.bc.ca/assets/gov/topic/57FDB4389CD0FB3F6EC9948B610A6BA9/earlylearn
ing/from_theory_to_practice.pdf NSTA
Brown, J. (2012). The state of STEM education research. Journal of STEM Education, 13( 5), 7-11. Carmines, E.G., & Zeller,
R. A. (1979). Reliability and validity assessment. Beverly Hills, CA: Sage. Eshach, H., & Fried, M. N. (2005). Should science
be taught in early childhood? Journal of Science Education and Technology, 15( 3), 315-337. doi:
10.1007/s10956-005-07-7198-9
Furtak, E. M., Seidel, T., Iverson, H., & Briggs, D. C. (2012). Experimental and quasi-experimental studies of inquiry-based
science teaching: A meta-analysis. Review of Educational Research, 82( 3), 300–
329. doi:10.3102/0034654312457206
Hallgren, K. A. (2012). Computing inter-rater reliability for observational data: An overview and tutorial. Tutor Quantitative
Methods Psychology, 8( 1), 23-34.
Hardy, I., Jonen, A., Möller, J., & Stern, E. (2006). Effects of instructional support within constructivist learning environments
for elementary school students’ understanding of ‘floating and sinking’. Journal of Educational Psychology, 98( 2), 307–326.
Human Learning Early Partnership (2009). 15 by 15: A comprehensive policy framework for early human capital investment in
Institute of Educational Services (2009). Selected observational measures for assessing the quality of early childhood classrooms: An
annotated bibliography. Retrieved from
http://static.k12.wv.us/oel/docs/AnnotatedBiblioEarlyChildhoodMeasuresfinaldraft.pdf
Katz, L. (2010, May). STEM in the early years. Paper presented at the SEED 2010: STEM in early education and
development conference. Retrieved from http://ecrp.uiuc.edu/beyond/seed/ . Le Paro, K., M., Pianta, R. C., & Stuhlman, M.
(2004). The classroom assessment scoring system: Findings from the prekindergarten year. The Elementary School
Leuchter, M., Saalbach, H., & Hardy, I. (2014). Designing science learning in the first years of schooling. An intervention
study with sequenced learning materials on the topic of ‘floating and sinking’. International Journal of Science Education,
36(10), 1751-1771. doi:10.1080/09500693.2013.878482
Marshall, J. C., Horton, B., & White, C. (2009). EQUIPping teachers: A protocol to guide and improve inquiry-based
instruction. The Science Teacher, 76( 4), 46-53. Milford, T., Tippett, C. D., Middlemiss, S., & Vermuelen, R. (2014, July). What
does STEM look like at the Pre-K level? Paper presented at the 3rd annual international STEM conference, Vancouver, BC.
Moomaw, S. (2013). Teaching STEM in the early years: Activities for integrating science, technology, engi neering,and
National Academy of Engineering and National Research Council. (2014). STEM integration in K 12education: Status,
prospects, and an agenda for research. Washington, DC: The National Academies Press.
National Research Council (NRC). (2011). Successful K-12 STEM education: Identifying effective approaches in science, technology,
engineering and mathematics. Washington, DC: The National Academic Press.
National Research Council (NRC). (2012). Framework for K-12 science education: Practices, crosscutting concepts and core
ideas. Retrieved from http://www.nap.edu/catalog.php?record_id=13165#
National Science Teachers Association (NSTA). (2014). Statement of early childhood education.
Retrievedfrom http://www.nsta.org/about/positions/earlychildhood.aspx Ontario Ministry of Education (OME). (2007). The
(OME). (2010). The full-day early learning–kindergarten program 2010-11 (draft version). Toronto, ON: Queen’s Printer for
Phillip Frost Museum of Science (PPFMS). (2014). ECHOS: Classroom observation/coaching tool. Retrieved from
http://www.miamisci.org/echos/docs/ECHOS_Observation_Tool.pdf
Patricia and Phillip Frost Museum of Science (PPFMS). (2014). ECHOS: Science process skills.
Retrieved from http://www.miamisci.org/echos/science_process_skills.php Ross-Fisher, R. (2008). Action research to improve
teaching and learning. Kappa Delta Pi Record, 44( 4), 160-164. doi:10.1080/00228958.2008.10516516 Statistics Canada.
Trundle, K., & Saçkes, M. (2012). Science and early education. In R. Pianta (Ed.), Handbook of early childhood education ( pp.
240-258). New York, NY: Guilford. Watkins & Pacheco, (2000). Interobserver agreement in behavioral research: Importance
Author Details
Todd M. Milford
BSc (University of Victoria), BEd (University of Victoria), Dip SpecEd (University of British Columbia), MEd (University of
Victoria), PhD (University of Victoria), is an assistant professor in the Faculty of Education at the University of Victoria. Prior
to this he was a lecturer in the Art, Law, and Education Group at Griffith University in Brisbane, Australia. He has science
and special education classroom teaching experience as well as in the on-line environment. He has been teaching at the
postsecondary level since 2005 primarily in the areas of science education, mathematics education, and classroom
assessment. His research has been and continues to be varied; however, the constant theme is using data and data
analysis to help teachers and students in the classroom.
Christine D. Tippett
BASc (University of British Columbia), BEd (University of Victoria), MA (University of Victoria), PhD (University of Victoria), is
an assistant professor of science education in the Faculty of Education at the University of Ottawa. She was an engineer
before she obtained her teaching degree, which influences her ways of thinking about science education. Her research
interests include visual representations, science education for all students, and professional development for science
educators (pre-service, in-service, and informal). Current projects focus on preservice science teachers’ images of
engineers, early childhood STEM education, and assessment of representational competence. Contact details: chris.tee@shaw.ca