SCIENTIFIC PAPER

(CRITICAL) APPRAISAL
Telaah kritis tulisan ilmiah

Samsriyaningsih Handayani
1

LITERATURE SEARCHING
INFORMASI
NON SCIENTIFIC
INFORMATION

TIDAK BISA DI
APPRAISE

SCIENTIFIC INFORMATION
RESEARCH JOURNAL,
TEXTBOOK (?)

BISA DI APPRAISE (UNTUK

SEMESTER 1 DITERAPKAN
SEBAGIAN APPRAISAL SAJA)
VALIDITY, IMPORTANCE, APPLICABILITY
(DILAMPIRKAN DALAM LAPORAN)

TIDAK LAYAK
DIGUNAKAN

LAYAK DIGUNAKAN
2

LEARNING ISSUES TERJAWAB

Scientific paper

Tulisan ilmiah adalah laporan tertulis yang

dipublikasikan, yang menggambarkan hasil
penelitian; ditulis dan dipublikasikan melalui
prosedur tertentu : editing, penapisan etika
ilmiah dan proses pencetakan dan publikasi
Salah satunya adalah laporan penelitian
(research report)

BAGIAN-BAGIAN RESEARCH REPORT

Judul
Abstrak dan/atau Ringkasan:
abstrak
: informasional vs indikatif
Ringkasan
: merangkum semua poin-poin penting
penelitian dan memuat kesimpulan.
Dalam beberapa jurnal ringkasan digantikan oleh abstrak
Pendahuluan
Apa problemnya?
Bahan dan Cara
Bagaimana problem tersebut diteliti?
Hasil
Apa temuan-temuan yang didapatkan
Diskusi
Apa arti temuan-temuan ini ?
Ucapan terima kasih/ penghargaan Siapa yang membantu ?
Siapa yang membiayai penelitian ini?
Daftar Pustaka
Kompilasikan selama melakukan dan
menyusun laporan penelitian; cek
dengan masing-masing jurnal asli.
FORMAT TULISAN ILMIAH LENGKAP
FORMAT TULISAN ILMIAH TIDAK LENGKAP
4

APPRAISAL : APA?
TELAAH KRITIS TULISAN ILMIAH

Metode yang membantu pembaca

dalam menilai validitas (seberapa
dekat dengan kenyataan) dan
relevansi (kemamputerapan dalam
praktek sehari-hari) temuan penelitian
Mengkaji apakah sebuah penelitian dapat
dipercaya dan berguna untuk penelitian
atau pasien kita
5

APPRAISAL : MENGAPA?

Banyak tulisan ilmiah yang dimuat di

majalah kedokteran yang berpotensi
memiliki kelemahan metodologi serius
Beberapa (barangkali malah sebagian
besar) artikel ilmiah harus dibuang ke
tempat sampah dan tidak boleh
dipergunakan
Begitu banyaknya informasi
6

APPRAISAL : BAGAIMANA?
MELAKUKAN TELAAH TERHADAP
VALIDITY
kedekatan dengan kenyataan, dapat

dipercaya/tidak

IMPORTANCE
penting/tidak
APPLICABILITY
kemamputerapan dalam praktek sehari-hari
7

APPRAISAL : DI MANA MENCARI ?

VALIDITY : di seksi metode

disain, sampel, ukuran sampel,
eligibility criteria, metode penentuan
sampel, metode randomisasi,
instrumen yang dipergunakan,
intervensi, pengukuran, metode
analisis
8

validitas
Mulai dengan mencari :
tulisan tersebut menjawab pertanyaan spesifik apa
Disain / rancangan
Pertanyaan tentang terapi obat atau intervensi
medis lain dijawab dengan
double blind randomised controlled trials
Pertanyaan tentang prognosis membutuhkan
studi longitudinal kohort
Pertanyaan tentang sebab akibat membutuhkan
kohort atau studi kasus kelola (case-control )
Case reports, meskipun secara metodologis lemah,
dapat dibuat dengan cepat dan berguna untuk
membuat waspada peneliti lain atau praktisi
9
medis terhadap reaksi negatif suatu obat

............WHERE
IMPORTANCE (di seksi hasil penelitian):
karakteristik sampel, drop out,
analisis, nilai p, confidence interval

p value= adalah probabilitas suatu hasil

penelitian (atau hasil yang lebih ekstrim)

terjadi secara kebetulan, bila hipotesis nol
penelitian itu benar
Confidence interval / interval kepercayaan:
kisaran perkiraan suatu nilai yang
mengandung suatu parameter yang tidak
diketahui; kisaran ini didapat dari
perhitungan pada sampel

10

Sampling
Investigation

Parameter pada populasi

Results
Statistik pada sampel

Inference

p value
Confidence intervals!!!

11

Sampling
Investigation

BB populasi antara
49-51 kg = parameter

Results
BB sampel rata-rata
50 kg = statistik

Inference

p value
Confidence intervals!!!

12

............WHERE
APPLICABILITY= validitas eksternal (di seksi
diskusi):
karakteristik pasien, local setting

Pertimbangan applicability : 4 B
- burden of illness (pasien, kota)
- barriers to treatment (ekonomi, geografi)
- behaviours needed (perilaku kita dan pasien kita)
untuk mengadopsi Dx, Tx
- balance (pertimbangan untung rugi antara
mengaplikasikan dengan cara yang ada di paper
dan cara lain)
13

DITERAPKAN PADA RESEARCH

REPORT YANG MANA
semua tulisan ilmiah

hierarchy of evidence

14

KERUCUT HIERARCHY OF EVIDENCE

Notasi standar untuk bobot relatif berbagai rancangan /
disain / jenis studi primer. Semakin tinggi ranking suatu
rancangan penelitian, semakin kuat dan mendekati
kebenaran hasil penelitian tersebut

15

Hierarchy of evidence (ringkasan)

Rancangan

Tujuan

Hasil

Skema,
arti

Systematic review
dan meta analisis

Review tulisan
OR gabungan, RR
lain, memberi arah gab, kualitas met
penelitian yad
penelit, bias publ.

Dolly 7

Randomized
Controlled Double
Blind Study

Menentukan efek
terapi

Efikasi terapi

Dolly 6

Kohort

Menentukan
prognosis

RR (p, CI), insidens

Dolly 5

OR (p, CI)

Dolly 4

Potong lintang/
Cross sectional
survey

Mencari hubungan PR (p, CI)

kausal tak spesifik prevalens

Dolly 3

Case series

Deskripsi luas

Deskripsi

Dolly 2

Laporan kasus/
Case reports

Deskripsi terbatas

Deskripsi

Dolly 1

Idea, anecdote,
editorial, opinion

Memperkenalkan
ide, buah pikiran

Ide

Kasus kelola/ Case Mencari kausa

control
spesifik

16

Latihan
Berdasarkan hanya pada ringkasan di
atas saja, tentukan validitas tulisan
ilmiah ini !

17

Perhatian !
Untuk melakukan critical appraisal
dengan baik, pemahaman terhadap isi
dan metode penelitian suatu tulisan
ilmiah adalah suatu KEHARUSAN
Bacalah contoh kriteria untuk melakukan
critical appraisal berikut ini
18

Case-Control Study

Penentuan case dan control tepat?

Matching?
Bukti tertulis/rekam medik
dipergunakan? Memory bias?

19

Critical appraisal studi kohort

Validitas :
- awal penelitian didefinisikan dengan jelas ?
- follow-up dilakukan secara memadai ?
- outcome dinilai dengan kriteria memadai ?
- ada kelompok dengan prognosis berbeda ?
- sudah divalidasi pada kelompok subyek lain ?
Importance :
- besar kemungkinan outcome dari waktu ke waktu ?
- seberapa tepatkah estimasi outcome (CI dari RR) ?
Applicability
- setting kita mirip ?
- bermanfaat bagi pembelajaran atau pasien ?
20

RINGKASAN PENELITIAN KOHORT

CONTOH
Tujuan : mencari hubungan antara berat-badan,
mortalitas dan disabilitas
Di Inggris, mulai 3-9 Maret 1958 bayi lahir
ditimbang, dikelompokkan menjadi 5 kategori
- masing-masing diikuti kondisi
kesehatannya dan dicatat dalam register
nasional pada usianya yang ke- 1, 7, 16,
23 dan 33 tahun
- hasil : ada yang mati atau cacat atau
mati dalam keadaan cacat, CI
bermacam-macam
Sudah pernah dilakukan penelitian serupa di Swedia
21

RCT
1. Randomisasi?
2. Follow-up cukup panjang dan lengkap?
3. Semua penderita yang dianalisis
tetap dalam kelompok randomisasi?
4. Blinded?
5. Kelompok2 tsb serupa pada awal penelitian?

22

Critical appraisal studi meta-analisis

Validitas
- disebutkan latar belakang meta-analisis?
- ada kriteria inklusi ? ada cara
penelusuran pustaka yang relevan?
- ada telaah validitas setiap studi peserta?
- hasil masing-masing studi konsisten satu
sama lain ?
Importance :
- mempengaruhi tata laksana penderita ?
OR gabungan ?
Applicability :
- kasus kita mirip dengan paper ?

23

RINGKASAN STUDI METAANALISIS CONTOH

Tujuan : menyelidiki hubungan antara
intervensi untuk menurunkan kolesterol dan
risiko kematian dengan sebab bunuh-diri,
kecelakaan dan trauma
Disain : meta-analisis outcome kematian dari
berbagai studi RCT luas dalam hal terapi
penurunan kadar kolesterol
Kriteria inklusi : penelitian tentang efek terapi
atas konsentrasi lipid dan tolerabilitasnya,
preklinis outcomes (hasil angiografi)
Metode penelusuran pustaka : ancestry
approach (locating previous study cited on
24
reference list in published papers)

.. RINGKASAN STUDI METAANALISIS CONTOH

Intervensi yang di review : modifikasi diet, terapi
obat, tindakan bedah partial ileal bypass selama
1-10 tahun
Hasil yang diukur: kematian karena bunuh diri,
kecelakaan dan kekerasan pada grup terapi dan
grup kontrol
Hasil meta-analisis : odds ratio non illness mortality
gabungan = 1.18 dgn berbagai CI, dst
Terapi penurunan kadar kolesterol tidak
mempengaruhi risiko kematian akibat bunuh diri,
kecelakaan atau trauma, dst.
25

Tulisan ilmiah lain yang menjadi

subyek critical appraisal

Tulisan bertopik
Tulisan bertopik
Tulisan bertopik
Tulisan bertopik
Tulisan bertopik
Tulisan bertopik
Tulisan bertopik
klinis
Tulisan bertopik

uji diagnostik
terapi
prognosis

clinical guideline
analisis cost-effectiveness
analisis economik
pengambilan keputusan
riset kualitatif

26

Good Luck
naningsam@yahoo.com
08155099004

27