1

SCIENTIFIC PAPER
(CRITICAL) APPRAISAL
Telaah kritis tulisan ilmiah

Samsriyaningsih Handayani
2
LITERATURE SEARCHING
INFORMASI
NON SCIENTIFIC
INFORMATION
SCIENTIFIC INFORMATION
RESEARCH JOURNAL,
TEXTBOOK (?)
TIDAK BISA DI
APPRAISE
VALIDITY, IMPORTANCE, APPLICABILITY
(DILAMPIRKAN DALAM LAPORAN)
LAYAK DIGUNAKAN
TIDAK LAYAK
DIGUNAKAN
BISA DI APPRAISE (UNTUK
SEMESTER 1 DITERAPKAN
SEBAGIAN APPRAISAL SAJA)
LEARNING ISSUES TERJAWAB
3
Scientific paper
Tulisan ilmiah adalah laporan tertulis yang
dipublikasikan, yang menggambarkan hasil
penelitian; ditulis dan dipublikasikan melalui
prosedur tertentu : editing, penapisan etika
ilmiah dan proses pencetakan dan publikasi
Salah satunya adalah laporan penelitian
(research report)
4
BAGIAN-BAGIAN RESEARCH REPORT
Judul
Abstrak dan/atau Ringkasan:
abstrak : informasional vs indikatif
Ringkasan : merangkum semua poin-poin penting
penelitian dan memuat kesimpulan.
Dalam beberapa jurnal ringkasan digantikan oleh abstrak
Pendahuluan Apa problemnya?
Bahan dan Cara Bagaimana problem tersebut diteliti?
Hasil Apa temuan-temuan yang didapatkan
Diskusi Apa arti temuan-temuan ini ?
Ucapan terima kasih/ penghargaan Siapa yang membantu ?
Siapa yang membiayai penelitian ini?
Daftar Pustaka Kompilasikan selama melakukan dan
menyusun laporan penelitian; cek
dengan masing-masing jurnal asli.
FORMAT TULISAN ILMIAH LENGKAP
FORMAT TULISAN ILMIAH TIDAK LENGKAP

5
APPRAISAL : APA?
TELAAH KRITIS TULISAN ILMIAH
Metode yang membantu pembaca
dalam menilai validitas (seberapa
dekat dengan kenyataan) dan
relevansi (kemamputerapan dalam
praktek sehari-hari) temuan penelitian
Mengkaji apakah sebuah penelitian dapat
dipercaya dan berguna untuk penelitian
atau pasien kita
6
APPRAISAL : MENGAPA?
Banyak tulisan ilmiah yang dimuat di
majalah kedokteran yang berpotensi
memiliki kelemahan metodologi serius
Beberapa (barangkali malah sebagian
besar) artikel ilmiah harus dibuang ke
tempat sampah dan tidak boleh
dipergunakan
Begitu banyaknya informasi
7
APPRAISAL : BAGAIMANA?
MELAKUKAN TELAAH TERHADAP
VALIDITY
kedekatan dengan kenyataan, dapat
dipercaya/tidak
IMPORTANCE
penting/tidak
APPLICABILITY
kemamputerapan dalam praktek sehari-hari
8
APPRAISAL : DI MANA MENCARI ?
VALIDITY : di seksi metode
disain, sampel, ukuran sampel,
eligibility criteria, metode penentuan
sampel, metode randomisasi,
instrumen yang dipergunakan,
intervensi, pengukuran, metode
analisis
9
validitas
Mulai dengan mencari :
tulisan tersebut menjawab pertanyaan spesifik apa
Disain / rancangan

Pertanyaan tentang terapi obat atau intervensi
medis lain dijawab dengan
double blind randomised controlled trials
Pertanyaan tentang prognosis membutuhkan
studi longitudinal kohort
Pertanyaan tentang sebab akibat membutuhkan
kohort atau studi kasus kelola (case-control )
Case reports, meskipun secara metodologis lemah,
dapat dibuat dengan cepat dan berguna untuk
membuat waspada peneliti lain atau praktisi
medis terhadap reaksi negatif suatu obat
10
............WHERE
IMPORTANCE (di seksi hasil penelitian):
karakteristik sampel, drop out,
analisis, nilai p, confidence interval

p value= adalah probabilitas suatu hasil
penelitian (atau hasil yang lebih ekstrim)
terjadi secara kebetulan, bila hipotesis nol
penelitian itu benar
Confidence interval / interval kepercayaan:
kisaran perkiraan suatu nilai yang
mengandung suatu parameter yang tidak
diketahui; kisaran ini didapat dari
perhitungan pada sampel
11
P
S
Investigation
S
Sampling
p value
Confidence intervals!!!
Inference
Results
Statistik pada sampel
Parameter pada populasi
12
P
S
Investigation
S
Sampling
p value
Confidence intervals!!!
Inference
Results
BB sampel rata-rata
50 kg = statistik
BB populasi antara
49-51 kg = parameter
13
APPLICABILITY= validitas eksternal (di seksi
diskusi):
karakteristik pasien, local setting

Pertimbangan applicability : 4 B
- burden of illness (pasien, kota)
- barriers to treatment (ekonomi, geografi)
- behaviours needed (perilaku kita dan pasien kita)
untuk mengadopsi Dx, Tx
- balance (pertimbangan untung rugi antara
mengaplikasikan dengan cara yang ada di paper
dan cara lain)
............WHERE
14
DITERAPKAN PADA RESEARCH
REPORT YANG MANA
semua tulisan ilmiah


hierarchy of evidence
15
KERUCUT HIERARCHY OF EVIDENCE
Notasi standar untuk bobot relatif berbagai rancangan /
disain / jenis studi primer. Semakin tinggi ranking suatu
rancangan penelitian, semakin kuat dan mendekati
kebenaran hasil penelitian tersebut
16
Hierarchy of evidence (ringkasan)
Rancangan Tujuan Hasil Skema,
arti
Systematic review
dan meta analisis
Review tulisan
lain, memberi arah
penelitian yad
OR gabungan, RR
gab, kualitas met
penelit, bias publ.
Dolly 7
Randomized
Controlled Double
Blind Study
Menentukan efek
terapi
Efikasi terapi Dolly 6
Kohort Menentukan
prognosis
RR (p, CI), insidens Dolly 5
Kasus kelola/ Case
control
Mencari kausa
spesifik
OR (p, CI) Dolly 4
Potong lintang/
Cross sectional
survey
Mencari hubungan
kausal tak spesifik
PR (p, CI)
prevalens
Dolly 3
Case series Deskripsi luas Deskripsi Dolly 2
Laporan kasus/
Case reports
Deskripsi terbatas Deskripsi Dolly 1
Idea, anecdote,
editorial, opinion
Memperkenalkan
ide, buah pikiran
Ide
17
Latihan
Berdasarkan hanya pada ringkasan di
atas saja, tentukan validitas tulisan
ilmiah ini !

18
Perhatian !
Untuk melakukan critical appraisal
dengan baik, pemahaman terhadap isi
dan metode penelitian suatu tulisan
ilmiah adalah suatu KEHARUSAN

Bacalah contoh kriteria untuk melakukan
critical appraisal berikut ini
19
Case-Control Study
Penentuan case dan control tepat?
Matching?
Bukti tertulis/rekam medik
dipergunakan? Memory bias?

20
Critical appraisal studi kohort
Validitas :
- awal penelitian didefinisikan dengan jelas ?
- follow-up dilakukan secara memadai ?
- outcome dinilai dengan kriteria memadai ?
- ada kelompok dengan prognosis berbeda ?
- sudah divalidasi pada kelompok subyek lain ?
Importance :
- besar kemungkinan outcome dari waktu ke waktu ?
- seberapa tepatkah estimasi outcome (CI dari RR) ?
Applicability
- setting kita mirip ?
- bermanfaat bagi pembelajaran atau pasien ?
21
RINGKASAN PENELITIAN KOHORT
CONTOH
Tujuan : mencari hubungan antara berat-badan,
mortalitas dan disabilitas
Di Inggris, mulai 3-9 Maret 1958 bayi lahir
ditimbang, dikelompokkan menjadi 5 kategori
- masing-masing diikuti kondisi
kesehatannya dan dicatat dalam register
nasional pada usianya yang ke- 1, 7, 16,
23 dan 33 tahun
- hasil : ada yang mati atau cacat atau
mati dalam keadaan cacat, CI
bermacam-macam
Sudah pernah dilakukan penelitian serupa di Swedia
22
RCT
1. Randomisasi?
2. Follow-up cukup panjang dan lengkap?
3. Semua penderita yang dianalisis
tetap dalam kelompok randomisasi?
4. Blinded?
5. Kelompok2 tsb serupa pada awal penelitian?


23
Validitas
- disebutkan latar belakang meta-analisis?
- ada kriteria inklusi ? ada cara
penelusuran pustaka yang relevan?
- ada telaah validitas setiap studi peserta?
- hasil masing-masing studi konsisten satu
sama lain ?
Importance :
- mempengaruhi tata laksana penderita ?
OR gabungan ?
Applicability :
- kasus kita mirip dengan paper ?

Critical appraisal studi meta-analisis
24
RINGKASAN STUDI META-
ANALISIS CONTOH
Tujuan : menyelidiki hubungan antara
intervensi untuk menurunkan kolesterol dan
risiko kematian dengan sebab bunuh-diri,
kecelakaan dan trauma
Disain : meta-analisis outcome kematian dari
berbagai studi RCT luas dalam hal terapi
penurunan kadar kolesterol
Kriteria inklusi : penelitian tentang efek terapi
atas konsentrasi lipid dan tolerabilitasnya,
preklinis outcomes (hasil angiografi)
Metode penelusuran pustaka : ancestry
approach (locating previous study cited on
reference list in published papers)


25
.. RINGKASAN STUDI META-
ANALISIS CONTOH
Intervensi yang di review : modifikasi diet, terapi
obat, tindakan bedah partial ileal bypass selama
1-10 tahun
Hasil yang diukur: kematian karena bunuh diri,
kecelakaan dan kekerasan pada grup terapi dan
grup kontrol
Hasil meta-analisis : odds ratio non illness mortality
gabungan = 1.18 dgn berbagai CI, dst
Terapi penurunan kadar kolesterol tidak
mempengaruhi risiko kematian akibat bunuh diri,
kecelakaan atau trauma, dst.

26
Tulisan ilmiah lain yang menjadi
subyek critical appraisal
Tulisan bertopik uji diagnostik
Tulisan bertopik terapi
Tulisan bertopik prognosis
Tulisan bertopik clinical guideline
Tulisan bertopik analisis cost-effectiveness
Tulisan bertopik analisis economik
Tulisan bertopik pengambilan keputusan
klinis
Tulisan bertopik riset kualitatif

27
Good Luck
naningsam@yahoo.com
08155099004