Studi sebelum dan sesudah (disebut juga studi pra-pasca) mengukur

hasil dalam kelompok peserta sebelum memperkenalkan produk atau

intervensi lain, dan sekali lagi sesudahnya. Setiap perubahan dalam
hasil dikaitkan dengan produk atau intervensi.

Desain studi ini tidak dapat mengesampingkan bahwa sesuatu selain

produk mungkin telah menyebabkan perubahan. Uji coba terkontrol
acak (RCT) dianggap sebagai cara paling andal untuk menunjukkan
bahwa produk digital Anda telah memberikan hasil. Namun, tidak
selalu memungkinkan untuk menjalankan RCT. Studi sebelum dan
sesudah lebih fleksibel dan umumnya lebih murah untuk dijalankan.

Kerangka Standar Bukti NICE untuk teknologi kesehatan digital

mempertimbangkan bukti studi sebelum dan sesudah untuk
menunjukkan keefektifan produk tingkat C (secara umum, ini adalah
produk digital yang berupaya mencegah, mengelola, merawat, atau
mendiagnosis kondisi).

Untuk apa menggunakannya

Gunakan studi sebelum dan sesudah ketika:

 Anda ingin mengidentifikasi perubahan hasil tertentu setelah

penggunaan produk digital Anda
 Anda meluncurkan produk digital Anda, atau segera setelahnya
(evaluasi sumatif), dan Anda ingin menjajaki apakah itu bisa efektif
 ada batasan praktis untuk apa yang dapat Anda lakukan, seperti
sampel kecil yang tersedia, kesulitan mengacak peserta, atau
anggaran terbatas

Pro
Manfaat meliputi:

 mereka dapat memberi tahu Anda sesuatu tentang efek produk

digital Anda
 mereka tidak memerlukan pengacakan
 mereka kurang intensif sumber daya daripada RCT
 mereka dapat berjalan bersamaan dengan penggunaan produk
secara normal

Kontra
Kekurangannya meliputi:

 mereka tidak dapat memberi tahu Anda dengan pasti bahwa produk
digital Anda adalah penyebab peningkatan bagi pengguna
 jika tidak ada perbedaan dalam hasil sebelum dan sesudah
intervensi, sulit untuk menginterpretasikan temuan – mungkin
berguna untuk menggunakan studi kualitatif untuk mencari tahu
mengapa hal ini terjadi

Bagaimana melakukan studi sebelum dan

sesudah
Mulailah dengan merencanakan apa yang ingin Anda ketahui dan
nyatakan dengan jelas hasil apa yang ingin Anda nilai. Gunakan
model Anda tentang bagaimana produk Anda akan membuat
perubahan untuk membantu Anda .

Penting untuk merekrut peserta yang semirip mungkin dengan orang

yang Anda inginkan untuk benar-benar menggunakan produk digital
Anda. Anda perlu merekrut peserta yang cukup untuk memberi Anda
kepercayaan pada temuan Anda ( baca lebih lanjut tentang kekuatan
statistik ).

Anda ingin menilai dan membandingkan hasil sebelum pengenalan

produk digital dan setelah periode intervensi. Anda mungkin ingin
menilai hasil segera pada akhir periode intervensi dan kemudian,
untuk melihat apakah efeknya berlanjut setelah waktu berlalu.

Panjang studi akan bervariasi tergantung pada produk digital dan apa
yang ingin Anda ketahui. Misalnya, mungkin diperlukan waktu yang
lebih singkat untuk menunjukkan peningkatan aktivitas fisik (hasil
perilaku) daripada penurunan berat badan (efek aktivitas fisik).
Buat hasilnya sespesifik mungkin. Misalnya, ketika menilai efek sikat
gigi digital untuk mendorong anak menyikat gigi secara teratur, hasil
Anda mungkin diukur sebagai total waktu (dalam detik) anak menyikat
gigi dan waktu rata-rata harian yang dihabiskan untuk menyikat gigi
selama waktu tertentu. periode (untuk menilai keteraturan).

Dalam beberapa konteks, Anda perlu mempertimbangkan bahwa

beberapa perubahan dari waktu ke waktu diharapkan. Misalnya, Anda
dapat melakukan studi sebelum dan sesudah pada aplikasi kesehatan
mental pada sekelompok peserta yang menunjukkan gejala depresi
tingkat tinggi. Namun, beberapa orang dengan gejala depresi pulih
dari waktu ke waktu tanpa intervensi apa pun. Jika peserta dalam
studi menunjukkan peningkatan dari pengukuran sebelum ke
pengukuran setelah, Anda tidak akan tahu apakah itu karena aplikasi
atau karena mereka akan menunjukkan beberapa peningkatan.

Jika ada 2 kelompok dan satu kelompok menerima intervensi dan

yang lainnya tidak, ini disebut studi sebelum dan sesudah terkontrol.
Grup kontrol dapat memberi Anda lebih percaya diri pada hasil Anda
dengan memberi tahu Anda apa perubahan tipikal dari waktu ke
waktu. Alih-alih grup kontrol, Anda bisa menggunakan kontrol historis:
data historis yang menindaklanjuti beberapa peserta. Ini memberi
tahu Anda apa perubahan tipikal dari waktu ke waktu, tetapi akan
melewatkan peristiwa terkini yang mungkin berpengaruh.

Contoh: efek intervensi aplikasi untuk

membantu mengurangi tindakan menyakiti
diri sendiri pada remaja
Lihat Stallard dan lainnya (2019): Aplikasi Ponsel Cerdas ( BlueIce )
untuk Kaum Muda yang Menyakiti Diri Sendiri: Buka Uji Coba Pra-
Pasca Fase 1 .

Tim mengembangkan aplikasi seluler untuk mendukung kaum muda

yang mengalami tindakan menyakiti diri sendiri, sebagai pelengkap
terapi tatap muka.

Mereka melakukan studi sebelum dan sesudah untuk menilai efek

potensial dari aplikasi tersebut. Mereka merekrut pasien dari layanan
kesehatan mental spesialis berusia 12 hingga 17 tahun yang memiliki
riwayat melukai diri sendiri atau sedang melukai diri sendiri. Mereka
menilai hasilnya 3 kali: di awal studi, pada 2 minggu (akhir periode
sosialisasi aplikasi), dan sekali lagi pada 12 minggu (penggunaan
pasca aplikasi).

Mereka mengumpulkan data tentang tindakan yang dilaporkan sendiri

dan diterima secara luas – menyakiti diri sendiri, depresi, kecemasan,
masalah perilaku – dan juga tindakan keamanan dan penerimaan
aplikasi khusus aplikasi. Mereka juga menggunakan data yang ada
dari catatan klinis untuk menilai perilaku menyakiti diri sendiri 4
minggu sebelum setiap peserta memulai penelitian.

Mereka bekerja sama dengan profesional kesehatan yang merujuk

peserta potensial ke para peneliti.

Persetujuan orang tua diperoleh untuk mereka yang berusia di bawah

16 tahun dan mereka yang berusia di atas 16 tahun dapat menyetujui
sendiri. Mereka mendapat persetujuan dari komite etik penelitian.

Dari 54 peserta yang dirujuk oleh profesional kesehatan, 40

memenuhi syarat dan 37 ingin menggunakan aplikasi setelah
membiasakan diri dengannya.

Dalam analisis mereka membandingkan data peserta pada awal

penelitian dan setelah 12 minggu menggunakan aplikasi, tim
menemukan bahwa aplikasi tersebut sangat dapat diterima dan
membantu peserta. Mereka juga menemukan penurunan kecemasan
dan depresi.

Dalam studi ini, 3 peserta tidak menganggap aplikasi tersebut

bermanfaat karena kesusahan mereka terlalu kuat untuk membuka
aplikasi. Tim merekomendasikan agar tingkat kesulitan dinilai
sebelum memperkenalkan aplikasi. Kemudian aplikasi dapat
disesuaikan dengan yang mungkin paling responsif terhadap
intervensi.

Lebih banyak informasi dan sumber daya

Robson dan lain-lain (2001): Panduan untuk mengevaluasi
keefektifan strategi untuk mencegah kecelakaan kerja: bagaimana
menunjukkan apakah penemuan keselamatan benar -benar berhasil .
Bab 3 ('Desain sebelum dan sesudah: Desain evaluasi sederhana')
berbicara tentang desain studi sebelum dan sesudah dan
menjelaskan potensi masalah.

Institut Kesehatan Nasional: Alat Penilaian Kualitas untuk Studi

Sebelum-Setelah (Pra-Pasca) Tanpa Kelompok Kontrol . Ini
membahas kriteria untuk studi sebelum dan sesudah berkualitas
tinggi.

Contoh studi sebelum dan sesudah dalam kesehatan digital

Martens dan lain-lain (2019): Memulihkan Memori Otobiografi yang

Berkurang pada Orang Dewasa Tua yang Sehat Dengan Pelatihan
Spesifisitas Memori Terkomputerisasi (c -MeST ): Sebuah Studi
Sebelum-Setelah Pengamatan . Tim mengembangkan pelatihan
memori berbasis komputer untuk orang dewasa yang lebih tua dan
menggunakan studi sebelum dan sesudah untuk mencari tahu
tentang keefektifan pelatihan tersebut.

Huurne dkk. (2013): Program perawatan berbasis web menggunakan

kontak terapeutik intensif untuk pasien dengan gangguan makan:
studi sebelum-sesudah . Dalam studi ini, para peneliti mengevaluasi
efek dari program berbasis web untuk mendukung pemulihan dari
gangguan makan.

Ruwaard dkk. (2012): Efektivitas pengobatan perilaku kognitif online

dalam praktik klinis rutin . Studi ini mengevaluasi keefektifan
perawatan perilaku kognitif online dalam pengaturan dunia nyata.

Diterbitkan 30 Januari 2020