NOTULA CRITICAL APPRAISAL

Presenter : Supak Silawani

Fasilitator : dr. Ahsanudin Attamimi, Sp.OG., MmedEd
Penanggap : Muhamad Reza Utama
Notulis : Saverina Nungky Dian Hapsari
Judul : What can we learn from problem-based learning tutors at a
graduate entry medical school? A mixed method approach
Publisher : BMC Medical Education
H-Index Journal : 48
Citation Impact Journal : Q1

1. RINGKASAN/ SUMMARY ISI PENELITIAN

a. Teori yang digunakan
Tutor problem-based learning (PBL) memiliki peran kunci dalam mempengaruhi
keberhasilan hasil PBL bagi mahasiswa. Tutor dapat berperan sebagai fasilitator,
menyediakan ‘scaffolding’ untuk memberikan struktur dan dukungan kepada mahasiswa
dalam melakukan self - directed learning. Faktor - faktor yang mempengaruhi hasil
pembelajaran PBL antara lain keahlian tutor, kepercayaan pada dasar pemikiran PBL dan
kemampuan untuk mengelola serta mempertahankan dinamika kelompok. Pada penelitian
sebelumnya didapatkan bahwa implementasi PBL tidak sesuai teori karena kurangnya atensi
akan pentingnya mempertahankan PBL dalam kurikulum, kurangnya engagement dari
mahasiswa dan kurangnya dukungan kepada tutor untuk mengembangkan kemampuan
sebagai fasilitator. Oleh karena itu, hal yang sudah berjalan dengan baik dalam PBL terutama
mengenai keterampilan dan strategi dalam proses tutorial perlu dipahami untuk menjawab
tantangan dalam mencapai keberhasilan PBL. Hasil penelitian ini memberikan wawasan
berharga dalam menjembatani kesenjangan antara praktik dan teori PBL dan dapat
digeneralisasikan ke program PBL lainnya.

b. Metodologi dan Kelemahannya

Tujuan penelitian dalam artikel ini adalah menggali pengalaman tutor dan faktor -
faktor yang memengaruhi proses dan hasil dari PBL. Metode yang digunakan dalam
penelitian adalah mixed method. Studi kuantitatif menggunakan survey digunakan untuk
mengetahui proses PBL yang telah berlangsung sedangkan studi kualitatif dengan FGD
dilakukan untuk mendukung hasil kuantitatif. Survei online dilakukan kepada 33 tutor
dilanjutkan dengan FGD pada 13 tutor dalam program Graduate Entry Medical School
(GEMS) di University of Limerick, Irlandia. Online survey tersebut berisi tentang waktu yang
dipersiapkan dalam menjadi tutor, dinamika kelompok, tantangan, pengalaman
memfasilitasi 2 angkatan yang berbeda, dan manfaat yang diperoleh untuk praktik klinis.
Ada beberapa tema yang muncul dari hasil studi kualitatif, yaitu waktu yang digunakan
untuk mempersiapkan diri sebagai tutor, engagement dalam proses PBL, dinamika
kelompok, pengembangan profesional, dan reward menjadi tutor.
Keterbatasan penelitian ini adalah data survei yang terkait dengan waktu persiapan
terbatas pada dua modul, sementara data FGD mencerminkan pengalaman tutor secara
keseluruhan. Berdasarkan temuan peneliti, tahun akademik merupakan faktor penting yang
mempengaruhi engagement mahasiswa dalam PBL. Hal tersebut harus dipertimbangkan
 ketika menafsirkan dan membandingkan hasil studi yang diselesaikan pada waktu yang
berbeda dalam setahun. Peneliti menyarankan penelitian selanjutnya menangkap opini
secara longitudinal untuk memastikan pandangan yang komprehensif.

2. RANGKUMAN HASIL TELAAH KRITIS

Critical appraisal dari jurnal ini menggunakan Mixed Methods Appraisal Tools
(MMAT) 2016 dengan 17 pertanyaan yang disertai jawaban berdasarkan penilaian presenter,
sebagai berikut:

No Question Answer
S1 Are there clear research Yes.
questions? Statement in the journal:
“Here we addressed tutor experience as an underresearched
and underrepresented source of information about the factors
affecting PBL practice and outcomes.”
S2 Do the collected data allow Yes.
to address the research Non-probability sampling  purposive sampling
questions? Quantitative : 2 survey
Qualitative : FGD

1.1 Is the qualitative approach Yes.

appropriate to answer the To probe more deeply into the attitudes & experiences
research question? of tutors with respect to PBL.

1.2 Are the qualitative data Yes.

collection methods adequate Focus groups allowed participants the opportunity to
to address the research disclose any thoughts, feelings and negative
question? experiences in a safe, non - judging environment.

1.3 Are the findings adequately Yes.

derived from the data? Audio recorded  transcripted by 3rd party company
to reduce bias.
Nvivo 10 using thematic analysis

1.4 Is the interpretation of Yes.

results sufficiently All authors interpreted the data and drafted the
substantiated by data? manuscript.
The adequate quotes provided to justify the themes.

1.5 Is there coherence between Yes.

qualitative data sources,
collection, analysis and
interpretation?
4.1 Is the sampling strategy Yes.
relevant to address the
research question?
described and analyzed?
4.2 Is the sample representative Yes.
of the target population? All PBL tutor (n=33, excluding one of the authors) were
sent an invitation to take part in this study.
4.3 Are the measurements Yes.
appropriate? The online survey used in this study was informed by
subject matter experts and with input from experienced
tutors based on a pilot survey.
4.4 Is the risk of nonresponse No.
bias low? Respond rate 89%
Participants were aware of the voluntary nature of
these surveys and confidentiality was assured.

4.5 Was appropriate statistical Can’t tell

analysis used?
5.1 Is there an adequate
rationale for using a mixed
methods design to address
the research question?
Yes.
The method allowed researchers to harness the
strenghs of both qualitative and quantitative data.

5.2 Are the different Yes.

components of the study The statistical package SPSS version 22 for Windows
effectively integrated to was used for quantitative data analysis of surveys. Openended
survey data was analysed qualitatively in Nvivo 10 using
answer the research
thematic analysis to identify any issues to be further explored
question? in focus groups.

5.3 Are the outputs of the Yes.

integration of qualitative and The outputs of quantitatives have been probed by
quantitative components qualitative outputs.
adequately interpreted?

5.4 Are divergences and No.

inconsistencies between Both outputs of quantitative and qualitative are
quantitative and qualitative consistencies.
results adequately
addressed?

5.5 Do the different components Can’t tell

of the study adhere to the The criteria for the qualititative component are not
quality criteria of each clear
tradition of the methods
involved?

Secara keseluruhan dari hasil penilaian, jurnal ini dapat digunakan sebagai referensi
untuk penelitian.

Dalam kegiatan critical appraisal ini terdapat beberapa pertanyaan yang diajukan,
sebagai berikut:
No Diskusi Tanggapan`
1. Informasi apa yang ingin dicari oleh Pengalaman sebagai tutor untuk mengetahui
peneliti? faktor - faktor yang memengaruhi proses PBL
dari pengalaman tutor itu sendiri.
2. Apa yang dapat kita usulkan Menetukan strategi persiapan tutor
 berdasarkan hasil temuan bahwa
tutor yang berpengalaman lebih
lama membutuhkan waktu yang
sama lamanya dengan tutor yang
pengalamannya lebih sedikit?
3 Apa yang dapat kita usulkan Perlu kemampuan fasilitasi dari tutor.
berdasarkan hasil temuan mengenai Ada 2 kelompok mahasiswa yang perlu
dinamika kelompok? diwaspadai yaitu mahasiswa yang sangat
mendominasi dan mahasiswa yang pasif.
4 Apa yang dapat kita usulkan Tahun pertama lebih sulit karena memelajari
berdasarkan hasil temuan hal-hal dasar (basic science). Masukan bagi
pengalaman tutor dalam peneliti adalah tutor ?
memfasilitasi 2 angkatan mahasiswa
yang berbeda?
5 Graduate Entry Medical School? Dari Di UK, ada fakultas yang membuka kesempatan
informasi yang didapatkan bagi lulusan sarjana non kedokteran (bachelor)
penganggap, GEMS adalah untuk menjadi dokter. Sebelum menempuh
penddikan non-formal yang pendidikan kedokteran, para lulusan sarjana
diformalkan non kedokteran tersebut akan menjalani
pendidikan graduate entry medical school
selama 2 tahun.
Pendidikan residensi di Indonesia berada di
bawah instutusi pendidikan tinggi, sedangkan di
negara lain berada di bawah kolegium (hospital-
based).

Undergraduate  bachelor of medicine

6 Apa perbedaan antara problem-
based learning dengan metode
tradisional?
7 Kesimpulan dari penelitian sudah
pernah ditemukan dalam buku teks.
Hal apa yang berbeda yang
didapatkan dari penelitian ini?
Postgraduate  residen
Problem - based learning mempelajari masalah
yaitu keluhan yang dialami pasien dalam praktik
klinis sedangkan metode tradisional
mempelajari diagnosis.
Problem-based learning sangat dinamis.
Pelaksanaannya pun berbeda - beda di setiap
institusi.
Dengan early clinical exposure diharapkan
mahasiswa lebih bersemangat dalam
mempelajari hal klinis tetapi kadang kala juga
menjadi kelemahan PBL karena mahasiswa
lebih mengutamakan masalah klinis dan bukan
ilmu yang mendasarinya.
Penelitian tidak jauh berbeda dari informasi
yang sudah ada dalam buku teks.
Hal yang baru sebenarnya tidak ada, tetapi
keunikan dari penelitian ini adalah mengenai
setting yang digunakan, yaitu GEMS.

3. SIMPULAN DAN LESSON LEARNED

a. Simpulan dan Keunggulan
 Pengalaman yang diperoleh dengan waktu dan dengan memfasilitasi beragam
kelompok PBL secara signifikan meningkatkan kepercayaan diri dan keterampilan tutor PBL
dan bahwa berbagi pengalaman adalah bagian berharga dari pengembangan profesional
sebagai dosen PBL. Praktik dan prosedur PBL terkait dengan perekrutan dosen, pelatihan
dan dukungan untuk meningkatkan pengalaman PBL bagi tutor dan mahasiswa.
Kekuatan penelitian ini adalah tingkat respons yang tinggi (89%) untuk partisipasi
survei.
b. Pesan/ Makna/ Lesson Learned
Ada beberapa hal yang dapat dijadikan bahan pembelajaran bagi presenter. Hal yang
pertama adalah tidak semua abstrak memiliki latar belakang. Kedua, penggunaan tabel yang
dituliskan berdekatan dengan keterangan memudahkan pemahaman. Ketiga, ternyata
mahasiswa cenderung mencari bahan tutorial dan tujuan pembelajaran dari kakak tingkat
serta penggunaan media pendukung seperti gawai dan buku teks mengurangi engagement
dalam proses tutorial. Hal tersebut dapat dijadikan kebijakan berupa aturan dalam proses
tutorial mengenai penggunaan media pendukung.