Anda di halaman 1dari 36

Latar Belakang

• Ragam Penyediaan Alat


ukur Psikologis
• Aplikasi
• Konstruksi
• Adaptasi
• Ajakan kolaborasi
• Aplikasi
• Konstruksi dan Adaptasi
• Evaluasi

This Photo by Unknown Author is licensed under CC BY-NC


ITC Guidelines for
Translating and
Adapting Tests
(2nd Edition)
+
Criterion Checklist

https://www.intestcom.org/files/guideline_test_adaptation_2ed.pdf
http://www.psicothema.com/pdf/4617.pdf
Menghindari Kekurangakuratan Hasil Pengukuran melalui
Adaptasi hingga Modifikasi
(AERA, APA, NCME, 2014)
• At one end of the range are test accommodations. As the term is used in the Standards, accommodations
consist of relatively minor changes to the presentation and/or format of the test, test administration, or
response procedures that maintain the original construct and result in scores comparable to those on the
original test.
• Di salah satu ujung kisaran adalah AKOMODASI. Akomodasi terdiri atas
perubahan yang relatif kecil pada penyajian dan / atau format tes, administrasi
tes, atau prosedur respons yang mempertahankan konstruksi asli dan
menghasilkan skor yang sebanding dengan yang ada pada tes asli.
• At the other end of the range are adaptations that transform the construct being measured, including the test
content and/or testing conditions, to get a reasonable measure of a somewhat different but appropriate
construct for designated test takers.
• Di ujung lain adalah ADAPTASI yang mengubah konstruksi yang diukur,
termasuk isi (konten) uji dan / atau kondisi pengujian, untuk mendapatkan hasil
pengukuran konstruk yang agak berbeda tetapi sesuai untuk peserta tes.
SOP WOM-2015
ALAT UKUR
Baru Baku

Gratis Berbayar

Bebas Bersyarat

Izin

Berhasil Gagal

Translate dan Adaptasi

Validasi

Versi siap pakai


Ragam Alat Ukur

BAKU BARU

ADOPSI Adaptasi Modifikasi Rekonstruksi

 Akomodasi Adaptasi 
4 Tahap Penyusunan

https://open.spotify.com/show/0mbg10Sajy9gdivgY3DAjD
Empat Tahap Perancangan Instrumen Psikologis

Merumuskan tujuan pengukuran dan


definisi konseptual

Membuat spesifikasi instrumen

Membuat dan mengevaluasi butir dan


panduan

Merakit dan mengevaluasi versi


operasional
http://userpage.fu-berlin.de/~health/selfscal.htm
Kompilasi Terjemahan
https://www.ocf.berkeley.edu/~johnlab/bfi.php
Big Five
Inventory – 2
(BFI-2)
https://www.colby.edu/psych/wp-content/uploads/sites/50/2013/08/bfi2-form.pdf
https://www.colby.edu/psych/wp-content/uploads/sites/50/2021/09/bfi2-form-indonesian.pdf
https://www.colby.edu/psych/wp-content/uploads/sites/50/2021/09/bfi2-form-indonesian.pdf
Also attached are the translation(s) and translator
information of which we are aware. We cannot vouch
for the quality of any translations, as we were not
involved in creating them.

You also have Dr. Ryff's permission to translate the


scales, should you choose to do so. We would
appreciate receiving a copy of the translation when it is
completed, along with complete contact information for
yourself and/or the translator
that we can share with others
Kompilasi Terjemahan
Psychological Well Being
Link ke contoh Email:https://s.id/IzinAlatUkur
18 Panduan ITC (ITC, 2017)
PC-1 (1) Meminta dan memperoleh izin secara tertulis yang diperlukan dari pembuat alat ukur / pihak pemilik hak cipta sebelum menggunakan alat ukur untuk keperluan
apapun.
PC-2 (2) Mengevaluasi (1) Definisi dan konten dari konstruk yang diukur oleh alat tes, DAN (2) Konten butir-butir (items) itu, sesuai digunakan untuk mengukur target populasi
yang dituju.
PC-3 (3) Minimalkan pengaruh perbedaan budaya dan bahasa yang tidak relevan dengan tujuan penggunaan tes dalam populasi yang diinginkan.
TD-1 (4) Memastikan bahwa proses adaptasi mempertimbangkan perbedaan linguistik, psikologis, dan budaya pada populasi yang dituju melalui pilihan ahli dengan keahlian
yang relevan.
TD-2 (5) Gunakan desain dan prosedur terjemahan yang sesuai untuk memaksimalkan kesesuaian adaptasi uji pada populasi yang dimaksud.
TD-3 (6) Memberikan bukti bahwa instruksi tes dan isi soal memiliki arti yang sama untuk semua populasi yang dituju.
TD-4 (7) Memberikan bukti bahwa format item, skala penilaian, kategori penilaian, konvensi tes, cara pemberian, dan prosedur lainnya cocok untuk semua populasi yang
dituju.
TD-5 (8) Kumpulkan data percontohan pada tes yang disesuaikan untuk memungkinkan analisis butir, penilaian reliabilitas dan studi validitas skala kecil lainnya, sehingga
revisi yang diperlukan untuk tes yang disesuaikan dapat dibuat.
C-1 (9) Pilih sampel dengan karakteristik yang relevan untuk tujuan penggunaan pengujian dan dengan ukuran dan relevansi yang cukup untuk analisis empiris.
C-2 (10) Memberikan bukti statistik yang relevan tentang ekuivalensi konstruk, ekuivalensi metode, dan ekuivalensi item untuk semua populasi yang dituju.
C-3 (11) Memberikan bukti yang mendukung norma, reliabilitas, dan validitas versi tes yang diadaptasi dalam populasi yang dimaksud.
C-4 (12) Gunakan desain persamaan yang sesuai dan prosedur analisis data ketika menghubungkan skala skor dari versi bahasa yang berbeda dari suatu tes.
A-1 (13) Siapkan bahan dan instruksi administrasi untuk meminimalkan masalah terkait budaya dan bahasa yang disebabkan oleh prosedur administrasi dan mode respons
yang dapat mempengaruhi validitas kesimpulan yang diambil dari skor.
A-2 (14) Tentukan kondisi pengujian yang harus diikuti dengan cermat di semua populasi yang diinginkan.
SSI-1 (15) Menafsirkan perbedaan skor kelompok dengan mengacu pada semua informasi relevan yang tersedia
SSI-2 (16) Hanya membandingkan skor lintas populasi ketika tingkat invarian telah ditetapkan pada skala di mana skor dilaporkan.
Doc-1 (17) Menyediakan dokumentasi teknis dari setiap perubahan, termasuk penjelasan tentang bukti yang diperoleh untuk mendukung kesetaraan, ketika sebuah tes
diadaptasi untuk digunakan pada populasi lain.
Doc-2 (18) Menyediakan dokumentasi untuk pengguna tes yang akan mendukung praktik yang baik dalam penggunaan tes yang disesuaikan dengan orang-orang dalam
konteks populasi baru.
International Testing Commission (2017, 2020)

Kategori Jumlah Jumlah


PRE-CONDITION 3 Tahap 4 Kriteria
TEST DEVELOPMENT 5 Tahap 8 Kriteria
CONFIRMATION 4 Tahap 10 Kriteria
ADMINISTRATION 2 Tahap 3 Kriteria
SCORE SCALES AND
2 Tahap 2 Kriteria
INTERPRETATION
DOCUMENTATION 2 Tahap 2 Kriteria
• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
International Testing Commission (2017, 2020)

Tahap Panduan ITC


PRE- PC-1 (1) Obtain the necessary permissions from the holder of the intellectual property
CONDITION rights relating to the test before carrying out any adaptation.
Memperoleh izin penggunaan
PC-2 (2) Evaluate that the amount of overlap in the definition and content of the
Kondisi Awal construct measured by the test in the populations of interest is sufficient for the
SEBELUM intended use (or uses) of the scores.
Adaptasi Memastikan kesesuaian definisi dan konstruk dengan area pengukuran
PC-3 (3) Minimize the influence of any cultural and linguistic differences that are
irrelevant to the intended uses of the test in the populations of interest.
Mengurangi pengaruh perbedaan budaya dan Bahasa

• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
International Testing Commission (2017, 2020)

Tahap Panduan ITC


TEST TD-1 (4) Ensure that the adaptation process considers linguistic, psychological, and cultural
DEVELOPMENT differences in the intended populations through the choice of experts with relevant expertise.
TD-2 (5) Use appropriate translation designs and procedures to maximize the suitability of the test
adaptation in the intended populations.
Proses TD-3 (6) Provide evidence that the test instructions and item content have similar meaning for all
Pengembangan intended populations.
(ADAPTASI) TD-4 (7) Provide evidence that the item formats, rating scales, scoring categories, test conventions,
Tes modes of administration, and other procedures are suitable for all intended populations.

TD-5 (8) Collect pilot data on the adapted test to enable item analysis, reliability assessment and
other small-scale validity studies, so that any necessary revisions to the adapted test can be made.

• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
International Testing Commission (2017, 2020)

Tahap Panduan ITC


CONFIRMATION C-1 (9) Select sample with characteristics that are relevant for the intended use of the
test and of sufficient size and relevance for the empirical analyses.
Tahap C-2 (10) Provide relevant statistical evidence about the construct equivalence, method
Konfirmasi equivalence, and item equivalence for all intended populations.
C-3 (11) Provide evidence supporting the norms, reliability and validity of the adapted
version of the test in the intended populations.
C-4 (12) Use an appropriate equating design and data analysis procedures when linking
score scales from different language versions of a test.

• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
International Testing Commission (2017, 2020)

Tahap Panduan ITC


ADMINISTRATION A-1 (13) Prepare administration materials and instructions to minimize any culture-
and language-related problems that are caused by administration procedures and
Proses penyajian response modes that can affect the validity of the inferences drawn from the scores.
(Administrasi)
A-2 (14) Specify testing conditions that should be followed closely in all populations
of interest.

• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
International Testing Commission (2017, 2020)

Tahap Panduan ITC


SCORE SCALES AND SSI-1 (15) Interpret any group score differences with reference to all relevant
INTERPRETATION available information

Interpretasi Skor SSI-2 (16) Only compare scores across populations when the level of invariance
has been established on the scale on which scores are reported.

• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
International Testing Commission (2017, 2020)

Tahap Panduan ITC


DOCUMENTATION Doc-1 (17) Provide technical documentation of any changes, including an account of
the evidence obtained to support equivalence, when a test is adapted for use in
Pengarsipan another population.
dokumen
Doc-2 (18) Provide documentation for test users that will support good practice in the
use of an adapted test with people in the context of the new population.

• Hernandez, A., Hidalgo, M. D., Hambleton, R. K., & Gomez-Benito, J. (2020). International test commission guidelines for test adaptation: A
criterion checklist. Psicothema, 32(3), 390-398.
• International Test Commission. (2017). The ITC Guidelines for Translating and Adapting Tests (Second edition). [www.InTestCom.org]
AKSES TERBUKA
The Standards for Educational and
Psychological Testing sekarang tergolong
dalam Pustaka dengan akses terbuka.

• PDF
• PDF eBook
• ePub (may require downloading an eReader)
Lima Pengembangan Utama
• Akuntabilitas penggunaan tes dalam
kebijakan pendidikan

• Aksesibilitas tes untuk semua ujian

• Peranan tes secara di tempat kerja

• Peranan teknologi dalam tes

• Kerangka bab dalam buku

https://www.testingstandards.net/history.html
Dokumen-dokumen Sebelumnya

• Komite Terpisah
• Technical Recommendations for Psychological Tests and
Diagnostic Techniques disusun oleh APA dan diterbitkan
oleh APA (1954).
• Technical Recommendations for Achievement Tests disusun
oleh Komite AERA & NCMUE (sekarang NCME) dan
diterbitkan oleh National Education Association (1955).
• Komite Bersama (AERA, APA, dan NCME)
• Standards for Educational and Psychological Tests and
Manuals, menggantikan kedua dokumen sebelumnya dan
diterbitkan oleh APA (1966).
• Standards for Educational and Psychological
Testing diterbitkan oleh APA (1974).
• Standards for Educational and Psychological
Testing diterbitkan oleh APA (1985).
• Standards for Educational and Psychological
Testing diterbitkan oleh APA (1999).

https://www.testingstandards.net/history.html
Konsep Mendasar tentang Validitas
1. Validitas mengacu pada sejauh mana bukti dan teori telah
mendukung interpretasi skor tes untuk penggunaan tertentu.
2. Validitas adalah hal paling mendasar dalam pengembangan
dan evaluasi tes.
3. Proses validasi (uji validitas) melibatkan pengumpulan
berbagai sumber bukti untuk memberikan dasar ilmiah bagi
interpretasi skor.
4. Yang dievaluasi adalah interpretasi skor tes, bukan tes itu
sendiri.
5. Ketika skor tes ditafsirkan dalam lebih dari satu cara, tiap
interpretasi yang diusulkan perlu divalidasi.
6. Pernyataan tentang validitas harus [hanya, red] mengacu
pada interpretasi tertentu terkait penggunaan hasil tes.
7. Adalah keliru ketika menggunakan istilah "validitas tes"

AERA, APA, NCME (2014)


Dengan demikian, definisi modern dari validitas perlu menggambarkan validasi [uji validitas,
red.] interpretasi skor tes sebagai langkah yang diperlukan, tetapi tidak mencukupi, dalam
perjalanan untuk memvalidasi penggunaan skor tes untuk tujuan yang dimaksudkan.
Mengabaikan penggunaan tes dalam mendefinisikan validitas sama dengan mendefinisikan
validitas untuk tes yang 'tidak berguna'.
• Stephen G. Sireci (2015): On the validity of useless tests, Assessment in Education: Principles, Policy & Practice, DOI: 10.1080/0969594X.2015.1072084
Validitas adalah hal yang statis (menetap) dan menjadi
ciri yang melekat pada suatu tes dan bisa diukur secara
tersendiri.
Apakah skor tes selaras dengan hasil pengukuran lain

Muncul tiga istilah klasik (3K atau 3 c): kriteria, konten, dan konstruk

Memberikan penekanan lebih besar kepada validitas konstruk.

Validitas adalah ketepatan penyimpulan atau pemaknaan skor tes. Berpusat pada validitas konstruk sebagai
konsep manunggal tentang validitas. Yang beragam bukan jenis melainkan sumber bukti validitas

Teori kontemporer (terkini) tentang validitas. Menawarkan pendekatan berdasarkan


penyajian argumentasi dalam memaknai validitas. Mengusulkan kriteria dampak
pengukuran sebagai salah satu sumber bukti validitas
Shaw, S., & Crisp, V. (2011). Tracing the evolution of validity in educational measurement: Past issues and contemporary
challenges. Research Matters: A Cambridge Assessment Publication, 11, 14-17.
Lima Sumber Bukti Validitas
Sumber Bukti Validitas Kriteria

Isi Tes Indeks persetujuan: CVI, CVR, Aiken's V

Waktu reaksi, gerakan mata, wawancara, diskusi kelompok terpusat/FGD,


Pemberian Tanggapan
wawancara kognitif (Think Aloud)
Uji dimensionalitas (CFA, Bifactor Model, Multiple Group Confi rmatory Factor
Kerangka Internal Analysis/MGCFA, Measurement invariance)
Uji Reliabilitas: Konsistensi internal (Alpha Cronbach, Estimasi Reliabilitas dari CFA)

Hubungan dengan Variabel Lain Uji korelasi dan Pemodelan Persamaan Struktural (SEM)

Dampak Pengukuran Teori dan Argumentasi tentang hasil pengukuran (Teori, Intervensi)

AERA, APA, & NCME (2014). Standards for Educational and Psychological Testing National Council on Measurement in
Education. Washington DC American
Psicothema 2014, Volume 26, Number 1. http://www.psicothema.com/tabla.asp?Make=2014&Team=1001
Tujuan Panduan
• Bimbingan kepada para profesional di bidang
industri/organisasi terkait pengembangan,
validasi dan penggunaan tes integritas sebelum
penerimaan kerja;
• Informasi kepada pengambil keputusan terkait
pelaksanaan pengujian integritas;
• Instruksi kepada pengelola dan pelaksana tes
integritas sebelum penerimaan kerja;
• Paparan praktik terbaik yang direkomendasikan
untuk penggunaan, penyebaran, penyimpanan,
dan perlindungan yang tepat terhadap informasi
yang diperoleh selama tes integritas;
• Pedoman praktik periklanan dan pemasaran; dan
• Panduan tentang kepatuhan pada standar
pengujian internasional dan undang-undang
ketenagakerjaan.

Association of Test Publishers . (2010). Model guidelines for


preemployment integrity testing (3rd ed.). Washington DC: Author.
Tes Mudah Perwakilan Tersedianya bukti
Integritas digunakan perusahaan wajib validitas
dalam menjalani pelatihan Secara umum tidak
tentang penggunaan menyinggung
prosedur
skor tes
seleksi awal Tidak ada dampak
(penyaringan) merugikan (taat
Tidak semua tes telah
pada panduan EEOC)
divalidasi
Dapat mencegah
Harus dibedakan dari pelamar yang tidak
tes kepribadian klinis jujur untuk
mendaftarkan
Association of Test Publishers . (2010). Model guidelines for
preemployment integrity testing (3rd ed.). Washington DC: Author.
EEOC: Equal Employment Opportunity Commission
Mari Terus
Belajar
dan
Berkolaborasi
siaputra@gmail.com

https://www.allwellnessguide.com/

Anda mungkin juga menyukai