Instrumen Dan Pengukuran
Instrumen Dan Pengukuran
A B
INGGI
F
R
RELIABILITAS E
K
U
E
N
S
C D
RENDAH I
PENGUKURAN
Jenis validitas
• Ada beberapa definisi validitas.
• Kumpulan definisi pertama mendefinisikan validitas dengan proses yang
ditentukan.
• Ini termasuk kriteria berbasis prediktif, dan validitas permukaan.
• Definisi kedua mendefinisikan di mana validitas ditemukan dalam studi
klinis dan mencakup validitas internal dan eksternal.
• Validitas kriteria atau validitas konstruksi adalah deskripsi seberapa
dekat pengukuran dari fenomena yang menarik terhadap pengukuran lain
dari hal yang sama dengan menggunakan instrumen yang berbeda.
• Ini berarti bahwa ada penelitian yang menunjukkan bahwa penilaian
pengukuran sesuai dengan ukuran lain yang diterima dari hal yang sama.
Jenis validitas
• Demikian pula, pembacaan manset tekanan darah berkorelasi dengan
intra-arteri tekanan darah yang direkam oleh transduser tekanan listrik.
• Validitas prediktif adalah jenis validitas berbasis kriteria yang
menggambarkan seberapa baik pengukuran memprediksi hasil suatu
peristiwa.
• Ini bisa menjadi hasil dari pengukuran yang lain atau adanya dan/atau
tidak adanya hasil tertentu.
• Sebagai contoh, kurangnya demam pada pasien lanjut usia dengan
pneumonia memprediksi kematian yang lebih tinggi dibandingkan
pada kelompok pasien yang sama dengan demam.
• Ini ditentukan dari factor studi yang terkait dengan hasil spesifik
kematian pada pasien usia lanjut dengan pneumonia.
Jenis validitas
• Validitas permukaan adalah seberapa banyak hal yang masuk akal yang
dimiliki pengukuran.
• Ini adalah sebuah pernyataan fakta bahwa instrumen mengukur
fenomena yang menarik dan masuk akal.
• Misalnya, kinerja mahasiswa yang diukur pada satu ujian pilihan ganda
harus memprediksi kinerja mahasiswa itu pada ujian pilihan ganda
lainnya.
• Performa pada pemeriksaan standar pasien yang diamati secara akurat
mengukur kemampuan mahasiswa untuk melakukan anamnesis dan
pemeriksaan fisik secara akurat pada setiap pasien.
• Namun memiliki validitas permukaan tidak berarti bahwa ukuran dapat
diterima tanpa verifikasi.
Jenis validitas
• Validitas internal dan eksternal adalah istilah yang digunakan untuk
menggambarkan validitas dan merupakan cara paling umum untuk
mengklasifikasikan validitas.
• Kita harus menggunakan skema ini ketika kita menilai setiap studi
atau penelitian.
• Validitas internal ada ketika presisi dan akurasi tidak terdistorsi oleh
bias yang dimasukkan ke dalam penelitian.
• Sebuah validitas internal penelitian yang valid secara tepat dan akurat
mengukur apa yang dimaksudkan dengan penelitian tersebut.
• Validitas internal terancam oleh masalah dalam cara merancang atau
melakukan penelitia, atau dengan alat yang digunakan untuk
melakukan pengukuran.
Jenis validitas
Validitas
Internal
Populasi
Ekternal /Target
Jenis validitas
• Validitas eksternal ada ketika pengukuran dapat digeneralisasikan dan
hasilnya diekstrapolasikan ke situasi klinik atau populasi yang lain.
• Validitas eksternal terancam ketika populasi yang dipelajari terlalu
ketat dan kita tidak dapat menerapkan hasilnya ke populasi yang lain
dan biasanya lebih besar.
• Secara skematis, kebenaran dalam penelitian merupakan fungsi dari
validitas internal.
• Hasil penelitian yang valid secara internal adalah benar jika tidak ada
sumber bias serius yang dapat menghasilkan kesalahan fatal dan
membatalkan penelitian.
• Kebenaran di alam semesta yang berkaitan dengan semua pasien lain
dengan masalah ini hanya ada jika penelitian ini valid secara eksternal.
Meningkatkan presisi dan akurasi
• Dalam proses merancang penelitian, peneliti harus memaksimalkan
presisi, akurasi, dan validitas.
• Bagian metode yang merinci protokol yang digunakan dalam studi
harus memungkinkan pembaca untuk menentukan apakah
perlindungan yang cukup telah diambil untuk memastikan studi yang
valid.
• Protokol harus eksplisit dan diberikan cukup detail untuk direproduksi
dengan mudah oleh siapa saja yang membaca penelitian ini.
• Ada empat kemungkinan pola kesalahan yang dapat terjadi dalam
proses pengukuran data.
Meningkatkan presisi dan akurasi
(1) Presisi dan akurasi hasilnya bisa sama dengan nilai sebenarnya dan
hanya ada sedikit variasi di sekitar nilai sebenarnya, atau simpangan
bakunya kecil.
(2) Hasilnya mungkin tepat tetapi tidak akurat: hasilnya tidak sama dengan
nilai yang sebenarnya, tetapi hanya ada sedikit variasi di sekitar nilai itu
karena sistimatik eror atau bias.
(3) Hasil yang akurat tetapi tidak tepat: hasilnya sama dengan nilai
sebenarnya tetapi ada banyak variasi di sekitar nilai itu, atau standar
penyimpangannya besar. Ini adalah tipikal kesalahan acak, fenomena
statistik.
(4) Hasilnya tidak akurat atau tepat: ini karena acak dan kesalahan
sistematis dan dalam hal ini hasil penelitian tidak sama dengan nilai
sebenarnya dan ada sejumlah besar variabilitas di sekitar nilai.
Meningkatkan presisi dan akurasi
• Cari pola kesalahan atau kesalahan potensial ini saat menilai suatu studi.
• Dengan menggunakan pengukuran yang tepat dan objektif, standarisasi
kinerja pengukuran dan pelatihan intensif para pengamat akan
meningkatkan presisi.
• Instrumen otomatis dapat memberikan pengukuran yang lebih
andal,dengan asumsi bahwa mereka dikalibrasi secara teratur.
• Jumlah pengamat yang terlatih harus dijaga seminimal mungkin untuk
meningkatkan presisi, memiliki lebih banyak pengamat meningkatkan
kemungkinan bahwa seseorang akan membuat kesalahan serius.
• Membuat pengukuran yang tidak mennyolok mengurangi bias subjek.
• Pengukuran yang tidak mengganggu adalah mereka yang tidak dapat
dideteksi oleh subjek.
Meningkatkan presisi dan akurasi
• Misalnya, mengambil tekanan darah menonjol sementara hanya
mengamati pasien untuk suatu hasil seperti kematian atau kesembuhan
/ hidup biasanya tidak mencolok.
• Menonton seseorang bekerja dan merekam efisiensinya mengganggu
karena dapat mengakibatkan perubahan perilaku, yang disebut efek
Hawthorne.
• Oleh karena itu, pengukuran yang tidak mengganggu paling baik
dibuat secara blinded (buta).
• Jika pengamat tidak mengetahui kelompok untuk mana pasien
ditugaskan, ada risiko lebih kecil bahwa pengukuran akan bias.
Meningkatkan presisi dan akurasi
• Membutakan pengamatan akan menciptakan iklim untuk konsistensi
dan keadilan dalam pengukuran, dan menghasilkan pengurangan
kesalahan sistematis.
• Pengukuran non-buta bisa menyebabkan perlakuan berbeda yang
diberikan kepada salah satu kelompok yang dipelajari.
• Hal ini dapat menyebabkan kontaminasi atau mengacaukan hasil.
• Dalam kebutaan tunggal, baik peneliti atau pasien tidak tahu siapa
yang ada di setiap kelompok.
• Double blinding terjadi jika pasien, orang yang merawat pasien, dan
peneliti yang mengukur hasilnya semuanya buta terhadap pengobatan
yang sedang dilakukan / diberikan.
Tes keandalan antar dan intra-rate
• Pengamat yang berbeda dapat memperoleh hasil yang berbeda ketika
mereka melakukan pengukuran.
• Beberapa pengamat mungkin mengukur suhu seorang anak
menggunakan sedikit berbeda teknik saat menggunakan termometer
seperti memvariasikan waktu thermometer tertinggal pada pasien atau
membaca tingkat merkuri dengan cara yang berbeda.
• Presisi ditingkatkan ketika variasi antar atau intra-pengamat
diminimalkan.
• Peneliti harus memperhitungkan variabilitas antara pengamat dan
antara pengukuran yang dilakukan oleh pengamat yang sama..
Tes keandalan antar dan intra-rate
• Variabilitas antara dua pengamat atau antara beberapa pengamatan
oleh satu pengamat dapat menimbulkan bias ke dalam hasil.
• Oleh karena itu bagian dari semua pengukuran harus diulang dan
variabilitas hasil yang diukur.
• Ini disebut sebagai antar-pengamat dan variabilitas intra-pengamat.
• Variabilitas antar-pengamat terjadi ketika dua atau lebih banyak
pengamat memperoleh hasil yang berbeda ketika mengukur fenomena
yang sama.
• Variabilitas intra-pengamat terjadi ketika pengamat yang sama
memperoleh perbedaan hasil ketika mengukur fenomena yang sama
pada dua kesempatan atau lebih.
Tes keandalan antar dan intra-rate
• Tes untuk variabilitas antar-pengamat dan intra-pengamat harus
dilakukan sebelum studi apa pun selesai
• Keandalan antar-pengamat dan intra-pengamat diukur dengan:statistik
kappa.
• Statistik kappa adalah ukuran kuantitatif derajat kesepakatan antara
pengukuran.
• Ini mengukur tingkat persetujuan di luar kesempatan antara dua
pengamat, yang disebut kesepakatan antar-penilai, atau antara
beberapa pengukuran yang dilakukan oleh satu pengamat, yang
disebut persetujuan intra-penilai.
Tes keandalan antar dan intra-rate
• Statistik kappa berlaku karena dokter dan peneliti sering berasumsi
bahwa semua tes diagnostik tepat.
• Namun, banyak penelitian telah menunjukkan bahwa sebagian besar
tes non-otomatis memiliki tingkat subjektivitas dalam interpretasinya.
• Ini telah terlihat pada tes radiologi yang umum digunakan seperti CT
scan, mamografi, dan angiografi.
• Itu juga hadir dalam tes yang biasa dipertimbangkan menjadi standar
emas seperti interpretasi sampel jaringan dariotopsi, biopsi, atau
pembedahan.
Tes keandalan antar dan intra-rate
• Berikut adalah contoh klinis bagaimana statistik kappa berlaku.
• Suatu pagi, dua warga radiologi sedang membaca mammogram.
• Ada 100 mammogram untuk dibaca.
• Residen pertama, Nomor 1, telah melakukan panggilan malam dan
cukup lelah.
• Dia tidak benar-benar ingin membaca ini dan tahu bahwa semua
bacaannya akan diperiksa oleh yang hadir.
• Dia juga beralasan bahwa karena ini adalah klinik skrining untuk
wanita muda dengan usia rata-rata 32, akan ada beberapa studi sangat
positif.
Tes keandalan antar dan intra-rate
• Departemen radiologi khusus ini memiliki sistim komputerisasi
membaca di mana residen mendorong tombol baik "normal" atau
"kanker“ pada konsol dan bacaan itu akan dimasukkan ke dalam file.
• Setelah membaca tiga yang pertama sebagai negatif, dia tertidur di
tombol "negatif", membuat semua seratus pembacaan negatif.
• Residen kedua, Nomor 2, sangat tertarik dengan mamografi dan telah
tidur sepanjang malam, karena dia tidak menelepon.
• Dia dengan hati-hati membaca setiap pelajaran dan menekan tombol
yang sesuai.
• Dia membaca 90 film seperti biasa dan 10 sebagai mencurigakan
untuk kanker payudara dini.
Tes keandalan antar dan intra-rate
Kesepakatan yang diamati antara dua residen ketika satu (no. 1) membaca
semuanya sebagai normal dan lainnya (no. 2) membaca 90 sebagai normal dan 10
sebagai abnormal.
Gambar 1
Tes keandalan antar dan intra-rate
• Pembacaan dua residen ditabulasikan dalam 2 × 2tabel pada Gambar1.
• Tingkat kesepakatan yang diamati adalah 90/100 atau 90%.
• Apakah perjanjian ini dari 90% sangat baik?
• Apa kesepakatannya jika mereka membaca mammogram kebetulan
saja?
• Dengan asumsi bahwa ada 90% normal dan 10% abnormal, kita dapat
berasumsi bahwa masing-masing membaca film mereka dengan
proporsi masing-masing hasil dan melakukannya tabel 2 × 2 yang
sama (Gbr. 2).
• Kesepakatan kebetulan adalah (81 + 1)/100 atau 82%.
Tes keandalan antar dan intra-rate
• Kappa adalah rasio kesepakatan aktual di luar peluang dan potensi
kesepakatan di luar kesempatan.
• Kesepakatan yang sebenarnya di luar kebetulan adalah perbedaannya
antara kesepakatan aktual yang ditemukan dan yang diharapkan secara
kebetulan.
• Di kita contohnya adalah 90 – 82 = 8% (0,08).
• Kesepakatan potensial di luar kesempatan adalahperbedaan antara
kesepakatan setinggi mungkin (100%) dan yang diharapkan oleh
kesempatan sendirian.
• Dalam contoh kita, 100 – 82 = 18% (0,18).
• Ini membuat Kappa = (0,90 –0,82)/(1,00 – 0,82) = 0,08/0,18 = 0,44.
Tes keandalan antar dan intra-rate
• Kesepakatan yang diamati antara dua penduduk ketika keduanya (no. 1 dan no. 2)
dibaca 90 sebagai normal dan 10 sebagai abnormal, tetapi tidak ada hubungan
antara bacaan mereka. 90% dibaca normal oleh no. 1 tidak sama dengan 90%
dibaca normal oleh no 2.
Gambar 2
Tes keandalan antar dan intra-rate
Interpretasi dari statistik kappa
Kesepakatan aktual antara pengukuran di luar kebetulan
Kappa =
Kesepakatan potensial antara pengukuran di luar kebetulan