Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Validasi Internal Mental Warwick-Edinburgh

Skala Kesejahteraan: Analisis
Rasch dalam Konteks Indonesia

Dimas Aryo Wicaksono Adiyo Roebianto Bambang Sumintono

Universitas Universitas Mercubuana Universiti
Airlangga aryo.wicaksono@psikologi.unair.ac.id
adiyo.roebianto@mercubuana.ac.id Malaya bambang@um.edu.my

Abstrak

Penelitian ini bertujuan untuk menganalisis sifat psikometrik Warwick-Edinburgh Mental WellBeing
Scale (WEMWBS) versi Indonesia menggunakan analisis pengukuran model Rasch untuk menguji
reliabilitas pengukuran, statistik kecocokan item, fungsi rating scale, dan fungsi item diferensial.
Sebanyak 855 sampel Indonesia menyelesaikan 14 item di WEMWBS versi Indonesia. Analisis
Rasch menunjukkan bahwa data sesuai dengan model, reliabilitas item-person di atas 0,8, dan
pemisahan item-person di atas persyaratan minimum. Semua item dalam instrumen telah memenuhi
indeks kriteria statistik dalam hal outfit mean square karena korelasi semua item-measure di atas
0,4. Analisis skala peringkat Likert menemukan skala berfungsi dengan baik dan bebas dari
ambang batas yang tidak teratur. Terakhir, DIF berdasarkan jenis kelamin terdeteksi pada tiga item.
Pengujian dan penyempurnaan lebih lanjut perlu dilakukan untuk memastikan kehandalan
WEMWBS versi Indonesia.

Kata kunci: Kesejahteraan Mental, WEMWBS, Validasi, Model Rasch, DIF.

Diterima 8 Maret 2021/Diterima 9 Juni 2021 ©Penulis semua hak dilindungi undang-undang

Perkenalan

Orang menjadi lebih tertarik untuk membahas kesehatan mental yang positif, yang menurut

Organisasi Kesehatan Dunia (2004) adalah yayasan untuk kesejahteraan individu dan masyarakat.

Kesehatan mental yang positif memungkinkan individu untuk berfungsi secara efektif, menyadari kemampuannya, mengatasinya

stresor, menjadi lebih produktif di tempat kerja, dan berkontribusi lebih banyak kepada masyarakat. Jiwa

kesehatan dapat dilihat sebagai modal manusia dan kesehatan fisik sebagai penyakit mental berkorelasi dengan tinggi

beban sosial dan ekonomi bagi masyarakat (Keyes, 2013).

Pengukuran kesejahteraan di Indonesia terutama menggunakan Psikologis (Eggleston et al., 2001;

Rachmayani & Ramdhani, 2014) dan Kesejahteraan subyektif (Pandyaswargo et al., 2015) yang cenderung

229
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

untuk mengukur dua tubuh kesejahteraan yang berbeda. Apalagi, Maulana, Khawaja, dan Obst (2019)

mengembangkan skala Kesejahteraan Indonesia yang mengukur dimensi yaitu (1) Spiritualitas,

(2) Hubungan Sosial Positif, (3) Kebutuhan Dasar, dan (4) Penerimaan. Studi tersebut melaporkan bahwa

pengukuran skala berkorelasi secara signifikan dengan skala kesejahteraan universal lainnya seperti

SWLS, WEMWBS, dan K10.

Sebagian besar skala inventaris kesehatan mental berfokus pada aspek gangguan mental (Tennant et al., 2007;

Stewart-Brown & Janmohammed, 2008) dan skala kesejahteraan lainnya, tidak termasuk emosi-afektif

aspek (Watson, Clark & Tellegen, 1988), segi kognitif-evaluatif (Diener et al., 1985) dan

aspek fungsi psikologis (Ryff & Keyes, 1995). Skala Kesejahteraan Mental Warwick-Edinburgh

(WEMWBS), dikembangkan oleh Tennant et al. (2007), berfokus terutama pada hal positif umum

kesehatan mental. WEMWBS telah dikembangkan melampaui versi aslinya (Tennant et al.,

2007) digunakan di berbagai negara, dan diterjemahkan ke dalam 25 bahasa berbeda. Yang dikembangkan

versi skala telah divalidasi secara ilmiah. Beberapa versi terjemahan yang divalidasi

skala mencakup versi dalam bahasa Spanyol (López et al., 2013), Portugis (Santos et al., 2015),

Mandarin (Ng et al., 2014; Dong et al., 2016), Norwegia (Karpavicÿiute dan Macijauskiene,

2016; Ringdal et al., 2017), Prancis (Trouselardet al., 2016), dan Belanda (Ikink, Lamers dan Bolier,

2012). Maraknya penggunaan skala ini menandakan bahwa skala tersebut sudah diakui

internasional sebagai alat ukur kesejahteraan mental.

Artikel ini bertujuan untuk menjelaskan proses adaptasi dan validasi internal WEMWBS di

konteks Indonesia. Tidak ada bukti validitas skala WEMWBS untuk bahasa Indonesia

sampel, khususnya menggunakan model pengukuran RASCH. Pengukuran model Rasch

pendekatan digunakan untuk proses validasi internal. Penelitian ini diharapkan dapat

mendeskripsikan perkembangan pengukuran kesejahteraan dalam konteks Indonesia, menyarankan an

skala alternatif berdasarkan indikator kesehatan mental yang positif, dan memberikan yang lebih komprehensif

perspektif dalam menjelaskan mental well being, sehingga diharapkan penelitian ini dapat menjadi sebagai

referensi untuk penelitian tentang kesehatan mental khususnya di Indonesia.

230
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Tinjauan Literatur

Istilah 'kesejahteraan' dan 'kesehatan mental positif' sering digunakan secara bergantian di bidang akademik

dan literatur kebijakan (Tennant et al., 2007). Namun, Ryan dan Deci (2001) membantah gagasan tersebut

menyesatkan. Mereka selanjutnya menyarankan bahwa tren penelitian saat ini berfokus pada kesejahteraan

bagaimana individu berfungsi sepenuhnya di lingkungan mereka, daripada membahas dua hal umum

perspektif kesejahteraan: pendekatan hedonis dan eudemonik. Tennan et al. (2007) memberikan a

skala untuk menangkap konsepsi yang luas tentang kesejahteraan, termasuk kognitif-evaluatif, afektif

fungsi emosional dan psikologis. Stewart-Brown (2015) menyatakan bahwa The Warwick

Skala Kesejahteraan Mental Edinburgh (WEMWBS) dirancang untuk menangkap semua aspek dengan baik

keberadaan, termasuk perasaan dan fungsionalitas. Dia lebih lanjut menunjukkan bahwa skala ini bisa menjadi

alat penting untuk pengukuran kesejahteraan karena mudah untuk diselesaikan, singkat, dan divalidasi dengan baik

(Stewart-Brown, 2015).

Kajian ini menjelaskan uji adaptasi dan validitas WEMWBS di Indonesia

konteks. Indonesia memiliki populasi Muslim terbesar secara global; dengan demikian, pengaruh Islam

ajaran dan nilai-nilai, aspek spiritualitas, cenderung dimasukkan dalam pengukuran bahasa Indonesia

kesejahteraan rakyat (Maulana, Khawaja, & Obst, 2019). Misalnya, Rahayu (2016) menemukan bahwa orang

Indonesia yang beragama cenderung lebih bahagia daripada orang yang tidak beragama. Lun dan Obligasi (2013)

juga menunjukkan bahwa spiritualitas berkorelasi positif dengan kesejahteraan subjektif.

WEMWBS telah digunakan di berbagai negara dan konteks budaya yang membutuhkan perbedaan

pendekatan pengukuran untuk mengukur sifat psikometrik. WEMWBS diuji menggunakan

metode pengujian psikometri valid dan reliabel karena indeks reliabilitasnya adalah Cronbach's Alpha

0,89. Selain itu, kecuali dengan PANAS-NA (-0,55), skala berkorelasi positif dengan

berbagai skala kesejahteraan seperti WHO-5 (0,77), SDHS (0,76), PANAS-PA (0,73), SWLS (0,72),

dan Skala Kesejahteraan Psikologis (0,73) (Stewart-Brown & Janmohammed, 2008). Itu

WEMWBS versi Irlandia Utara dilaporkan memiliki indeks Cronbach alpha sebesar 0,93. Itu

Hasil Analisis Komponen Utama menunjukkan bahwa faktor dasar tunggal menjelaskan 54% dari

varians (Lloyd & Devine, 2012).

231
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Versi bahasa Spanyol dari WEMWBS, yang diindikasikan oleh analisis CFA sebagai skala satu dimensi

(Lopez et al., 2013), dilaporkan memiliki reliabilitas tinggi (Cronbach's Alpha lebih dari 0,90) dan

korelasi total-item dari 0,44 menjadi 0,76. Begitu pula dengan versi Portugis Brasil

WEMWBS juga memiliki reliabilitas yang tinggi dengan Cronbach's Alpha sebesar 0,89. Versi ini memiliki moderat

korelasi positif dengan skala kesejahteraan mental lainnya seperti WHO-5 (r=0,59), WBMMS

(r=0,69) (Santos, 2015). Taggart dkk. (2012) melaporkan bahwa versi WEMWBS dulu

mengukur kesejahteraan orang Cina dan Pakistan yang tinggal di Inggris menunjukkan satu

pemuatan faktor masing-masing 0,60-0,82 dan 0,51-0,83, dan indeks alfa Cronbach 0,92 dan

0,91 untuk peserta Cina dan Pakistan. Trouselard et al. (2016) melaporkan bahwa di antara

sampel (pekerja, pelajar, dan pasien), analisis faktor WEMWBS Perancis menunjukkan

40,12% varian dari pekerja dan pelajar. Versi ini memiliki jangkauan alfa Cronbach

dari 0,84 – 0,90, dengan selang kepercayaan 95%.

WEMWBS versi Cina diberikan kepada dua sampel berbeda: perawat sarjana

peserta pelatihan (Dong et al., 2016) dan pasien berbahasa Mandarin. Kesejahteraan yang terakhir diukur

oleh versi singkat dari WEMWBS (Ng et al., 2014). WEMWBS versi Cina

digunakan untuk mengukur kesejahteraan calon perawat sarjana menunjukkan indeks alfa Cronbach yang

tinggi sebesar 0,94, dan korelasi item-total berkisar antara 0,66 hingga 0,83. Faktor penjelas

analisis konsisten dengan struktur skala yang diprediksi, dan semua pemuatan faktor adalah sama (di atas

0,40). Analisis Komponen Utama juga mengungkapkan satu faktor menjelaskan 59,45% dari total

varians (Dong et al., 2016). Selain itu, versi singkat dari WEMWBS berbahasa Mandarin dulu

mengukur kesejahteraan pasien berbahasa Cina menunjukkan alfa Cronbach 0,89,

konsisten dengan versi bahasa Inggris dari WEMWBS. Analisis Komponen Utama diidentifikasi

bahwa satu faktor menjelaskan 61,1% dari total varians (Ng et al., 2014).

Analisis WEMWBS pada pengukuran model Rasch menunjukkan bahwa model tersebut fit short

versi WEMWBS (tujuh item) (Bartram, Sinclair & Baldwin, 2013; Stewart-Brown et al.,

2009), diterapkan pada The UK Veterinary Profession (Bartram, Sinclair & Baldwin, 2013) dan

Survei Populasi Pendidikan Kesehatan Skotlandia (Stewart-Brown et al., 2009). Tujuh dari 14

232
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

item sesuai dengan residual di atas kisaran yang direkomendasikan yaitu skor ÿ 2,5 logit. Enam item telah

dihapus dari skala. Barang-barang itu tidak. 5 (+5.81),"Saya memiliki energi untuk disisihkan," no. 8

(-10.59),"Saya merasa nyaman dengan diri saya sendiri," no. 10 (-6.22), “Saya merasa percaya diri,” tidak. 12

(+7.94), “Aku merasa dicintai,” no. 13 (+2,99), “Saya tertarik dengan hal-hal baru,” dan no. 14, “Saya sudah

merasa ceria” (-9.61) (Bartram, Sinclair & Baldwin, 2013). Hasil ini menunjukkan single langsung

pengukuran faktor dan sejalan dengan Stewart-Brown et al. (2009); jadi, modelnya fit short

versi WEMWBS. Selain itu, korelasi antara versi pendek dan aslinya

WEMWBS adalah 0,95 (Stewart-Brown et al., 2009). Terakhir, Differential Item Functioning (DIF)

analisis menunjukkan bahwa skala ini bebas dari DIF dalam kriteria jenis kelamin dan usia (Bartram, Sinclair &

Baldwin, 2013; Stewart-Brown et al., 2009).

metode

Instrumen Skala Kesejahteraan Mental Warwick-Edinburgh

Penelitian ini menggunakan The Warwick-Edinburgh Mental Wellbeing versi terjemahan bahasa Indonesia

Skala (WEMWBS) untuk mengukur tingkat kesehatan mental responden Indonesia. Skala dari

WEMWBS diterjemahkan ke dalam bahasa Indonesia dengan menggunakan terjemahan-terjemahan balik

proses (Brislin, 1970). Setelah izin untuk menerjemahkan model dalam bahasa aslinya ke dalam

Bahasa Indonesia diberikan, penulis menerjemahkan instrumen ke dalam bahasa Indonesia; kemudian dikonfirmasi

kesepadanan mereka dengan meminta dua penerjemah independen, dengan bahasa Indonesia sebagai bahasa pertama,

untuk terjemahan belakang. Para penerjemah, memiliki latar belakang studi bahasa Inggris dan psikologi,

meninjau terjemahan secara terpisah. Penulis versi asli kemudian mengkonfirmasi

kesetaraan terjemahan dengan beberapa rekomendasi untuk revisi. Secara khusus, rekomendasi terkait

dengan ekspresi alternatif, dan klarifikasi dari beberapa

pernyataan seperti "memiliki banyak energi" (item no. 5) menjadi "Saya merasa energik," dan "intim

hubungan” (item 9) menjadi “Saya merasa dekat dengan orang lain.”

Instrumen WEMWBS, terdiri dari 14 item dengan kalimat positif yang meliputi kedua eudaimonic

dan aspek kesejahteraan hedonis, mengukur aspek kesehatan mental yang positif (Lopez et al., 2012).

Versi bahasa Indonesia mirip dengan versi aslinya karena menggunakan skala Likert 5 poin, dari 1

233
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

(tidak pernah) sampai 5 (selalu), dan berisi tiga pertanyaan demografis dasar (yaitu, usia, jenis kelamin, dan

pendidikan).

Peserta penelitian

Penelitian ini menggunakan teknik convenience sampling untuk mengumpulkan data. Para peserta

terlibat dalam validasi instrumen adalah 900 sampel Indonesia secara acak bervariasi dari

latar belakang mereka. Tidak ada latar belakang pekerjaan tertentu sebagai sampel penelitian,

kategorisasi sampel berdasarkan jenis kelamin 548 responden (64,1 persen) adalah laki-laki dan 307

responden (35,9 persen) berjenis kelamin perempuan. Beberapa detail tentang latar belakang demografis

partisipan dapat dilihat pada Tabel 1. Mengenai pertimbangan etis, persetujuan responden

untuk berpartisipasi dalam penelitian ini dicari sebelum mereka mengisi kuesioner secara manual (kertas dan

pensil). Sampul depan kuesioner menjelaskan bahwa partisipasi dalam survei bersifat sukarela dan

anonim. Responden yang mengisi kuesioner telah sepenuhnya mengetahui detail ini.

Data dimasukkan ke dalam Microsoft Excel dan diperiksa dengan model pengukuran Rasch

perangkat lunak bernama Winsteps versi 3.73 untuk validasi dan pembersihan data. Prosedur ditemukan

bahwa 30 responden memberikan tanggapan outlier (semua peringkat maksimum). Tanggapan

ketidaksesuaian dari 15 responden juga ditemukan dan dihilangkan. Analisis menentukan data dari 855

responden dapat melanjutkan untuk analisis lebih lanjut. Profil demografi data Indonesia

dalam penelitian ini ditunjukkan pada Tabel 1.

234
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Tabel 1
Data Demografi Responden (N = 855)
Demografi Frekuensi Persentase (%)

Jenis kelamin Pria 548 64,1%

Perempuan 307 35,9%

Usia <25 tahun 123 14,4%

26 - 38 tahun 459 53,7%

39 – 55 tahun 259 30,3%

> 50 tahun 12 1,4%

hilang 2 0,2%

Tingkat Pendidikan Sekolah menengah atas

409 47,7%

Diploma 30 3,5%

Gelar sarjana 241 28,3%

Gelar master 146 17,1%

Gelar doktor 17 2,0%

hilang 12 1,4%

Model Pengukuran Rasch

Data yang dikumpulkan dari kuesioner WEMWBS bersifat ordinal; frekuensi tanggapan

muncul sebagai probabilitas ganjil. Dengan kalibrasi kesulitan item dan kemampuan orang, serta

fungsi logaritma, Model pengukuran Rasch mengubah data ordinal mentah (tipe Likert

data) menjadi data logit (log unit ganjil) yang memiliki kualitas tipe equal-interval. Item logit dinilai

kebugaran keseluruhan instrumen pada tingkat variabel dan item (atribut psikometrik.

Selain itu, orang logit menilai hasil setiap orang, termasuk kesesuaiannya dengan informasi statistik

(Linacre, 2012; Boone, Townsend, & Staver, 2014; Sumintono & Widhiarso, 2014;

Obligasi & Rubah, 2015). Secara khusus, skala peringkat model Rasch cocok untuk WEMWBS

kuesioner yang menilai opini/persepsi/sikap manusia (Englehard, 2013; Bond & Fox,

2015). Analisis rasch dapat menentukan tingkat kesulitan item (kalibrasi item), mendeteksi kecocokan item, dan

mengidentifikasi bias item (disebut fungsi item diferensial atau DIF) dengan pengukuran yang tepat. Itu

235
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Model pengukuran Rasch menghasilkan person logit yang menunjukkan kesejahteraan suatu
individu.

Hasil

Keandalan dan Unidimensi

Model skala peringkat dua sisi dari item dan orang, model skala peringkat Rasch, digunakan untuk

menganalisis 14 item Warwick-Edinburgh Mental Well Being Scale (WEMWBS) yang diberikan kepada 855

responden. Item dipusatkan pada nol, memungkinkan kalibrasi 'mengambang' dari responden

tingkat kesejahteraan mental. Tabel 2 menunjukkan bahwa rata-rata takaran (logit) butir tersebut adalah 0,00 logit,

dengan standar deviasi yang relatif rendah sebesar 0,31, menunjukkan dispersi tindakan yang sempit

melintasi skala logit dalam tingkat kesulitan item. Rata-rata person logit adalah +2,67 logit, menunjukkan hal itu

sebagian besar responden memiliki kesehatan mental yang baik. Namun, standar deviasinya adalah 1,56,

menunjukkan bahwa tingkat kesejahteraan tersebar luas di antara para peserta.

Meja 2

Ringkasan Statistik Orang dan Barang

Orang Barang

N 855 14

Pengukuran

Berarti 2.67 0,00

Deviasi Standar, SD 1.56 0,31

Kesalahan Standar 0,05 0,09

Kuadrat Rata-Rata Pakaian

Berarti 1.00 1.00

SD 0,56 0,18

Pemisahan 2.78 5.14

Keandalan 0,89 0,96

Alfa Cronbach 0,91

2 20550*
Chi-kuadrat (ÿ )

Varian mentah 47,5%

* p <0,01

236
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Rata-rata statistik kuadrat rata-rata pakaian dari item dan orang berada pada nilai yang diharapkan dari 1.

Selain itu, nilai chi-kuadrat signifikan, menunjukkan data berseragam yang sesuai dengan model

(Boone et al., 2014; Engelhard, 2013). Indeks pemisahan (sama atau lebih dari tiga) dan

keandalan (lebih dari 0,67) statistik barang dan orang juga menunjukkan keandalan yang tinggi (Fisher,

2004). Terakhir, nilai varian mentah lebih dari 40%, menunjukkan bahwa instrumen tersebut memiliki nilai yang tinggi

uni-dimensi mengukur kualitas perapian responden (Boone et al., 2016).

Tabel 3.
Statistik Analisis Skala Penilaian

Rasch-Andrich
Data Frekuensi % Rata-rata
Kategori Ambang SE
Kategori ukuran
Ukuran
Hitung
1= tidak <1% -1,27 Tidak -

pernah 2 = 3% -0,25 ada 0,19

= 21%
Terpakai 34 357 2559 1,37 -3,60 -1,38 0,06
jarang 3
kadang- 5422 45% 2,63 +1.30 0,03
kadang 4 = sering 53596
= selalu 30% 3,99 +3,69 0,02

Analisis skala peringkat

Penelitian ini menggunakan kriteria penilaian tipe Likert frekuensi dari skor 1 (“tidak pernah”) hingga 5 (“selalu”).

Statistik pemisahan kriteria peringkat ditunjukkan pada Tabel 3. Semua

kategori dalam WEMWBS versi bahasa Indonesia dipilih oleh lebih dari sepuluh orang.

Rata-rata orang yang diukur oleh setiap kategori naik secara monoton dengan skala penilaian.

Nilai jarak ideal antar skala penilaian adalah 1,40 hingga 5,0 logit (Van Zile-Tamsen, 2017).

237
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

PROBABILITAS KATEGORI: MODE - Ukuran struktur di persimpangan PR 1.0 + OBA

-+-----+-----+-----+-----+-----+-----+-----+-----+ -----+-----+-
+
| |

| |

| |

B .8 +1 5+
SAYA
| 11 | | 5|
L 1 55 | |
SAYA 1 33333 5
T .6 + 11 22222 333 33 4444444 5 +
DAN
| 1 22 22 3 33 44 3 4 44 5 |
.5 + 122 22 3 445 +
HAI
| 221 3* 4* 554 |
F .4 + 2 1 32 43 54 +
|
2 1 3 22 4 33 5 44
R |
22 1 3 2 44 3 5 4
DAN
|
2 11 33 2 4 3 5 | | 44 |
S .2 +22 * 2244 3*5 4+
P |
33 11 4422 55 33 |

HAI
|
33 11 44 222 55 33 |

N |
33333 1****4 2***55 33333 |

S .0 +*********************5555************111*************** **********+
DAN -+-----+-----+-----+-----+-----+-----+-----+-----+ -----+-----+-
-5 -4 -3 -2 -1 0 1 2 3 4 5
Orang [MINUS] Item UKURAN

Gambar 1. Kurva probabilitas respon lima kategori tipe Likert

Tabel 3 menunjukkan jarak ambang Rasch-Andrich antara kelima rating

kategori yang ideal. Hasilnya menunjukkan bahwa skala penilaian responden baik

dipahami dan dinilai secara efektif kesejahteraan mental responden. Setiap skala peringkat unit

efektivitas sangat penting untuk mendapatkan hasil yang akurat dan optimal (Van Zile-Tamsen, 2017).

Gambar 1 menunjukkan bahwa setiap kurva probabilitas peringkat memiliki puncak dan dipisahkan, yang menunjukkan bahwa

peringkat dipahami dengan baik (Bond dan Fox, 2015).

238
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Tabel 4.
Kalibrasi Barang WEMWBS (N= 855)
WWMBS Nilai Logit Berdiri. Pengukuran Poin Pakaian MNSQ. Kor.
Tingkat kesulitan Barang

W5 Barang 1,06 0,62

Jarang W3 +0,50 0,98 0,68
W12 +0,42 1,17 0,62
W6 +0,36 0,83 0,69
W7 +0,34 0,76 0,73
W1 +0,19 1,40 0,62
W2 -0,03 0,96 0,70
Kadang-kadang W10 -0,03 0,81 0,75
W9 -0,07 1,02 0,66
W4 -0,09 1,21 0,64
W14 -0,14 0,88 0,73
W8 -0,16 0,87 0,73
Sering W11 -0,30 0,89 0,69
W13 -0,39 -0,61 0,06 0,06 0,06 0,06 0,060,62
Kesalahan 0,06 0,061,15 0,06 0,06 0,06 0,06 0,06 0,06 0,06

Item Fit Statistik

Tabel 4 mengklasifikasikan butir soal menurut tingkat kesulitan atau nilai logit (LVI). Pengklasifikasian item ke

dalam tiga tingkat kesulitan dilakukan dengan membagi distribusi skor logit item berdasarkan nilai mean dan

standar deviasi (lihat Tabel 2). Ada empat item dalam

kategori 'jarang' (LVI > +0,31 logit), delapan item dalam kategori 'kadang-kadang' (+0,31 > LVI > -

0,31), dan dua item dalam kategori 'sering' (LVI < -0,31).

Dalam hal statistik kecocokan item, indeks mean-square pakaian termasuk dalam kriteria kecocokan 0,6 – 1,4. Semua

titik korelasi ukuran memiliki nilai positif dan lebih dari 0,4 menunjukkan semua pernyataan

dipahami dengan baik oleh responden (Engelhard, 2013; Boone et al., 2014). Seperti yang ditunjukkan oleh

kesalahan standar, ketepatan pengukuran menunjukkan indeks yang tepat (Bond dan Fox, 2015).

239
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Orang - PETA - Barang

<lebih>|<jarang>
.# | |

6 +

T| .## |
.

5 | | .## +
## |

| .### |

4 ####S| .###

+ | .###
| .##
| .#### |
3 .### +
.###
| .############
M| .####
| .####
2 | .### +
.### |
### | .##
|

1 ##S| .##
+ .## | |
T W5
#. |S W12 | W3 W6
. W7 ##
0 +M W1 W10 W2 W9
. | W14 . W4 W8
T|S W11 |T
. W13 |
.
-1 . +
. |

. |

. |

-2 . +
|

. |

. |

. |

-3 . +
<kurang>|<frekuensi>
SETIAP "#" ADALAH 10. SETIAP "." ADALAH 1 SAMPAI 9

Gambar 2. Peta Wright Kalibrasi WEMWBS versi bahasa Indonesia

Peta Wright pada Gambar 2 menampilkan penggambaran bersama responden, item, dan kesejahteraan

tingkat. Orang dan barang berarti (M) dari 1 SD (S) dan 2 SD (T) masing-masing ditempatkan pada

sisi kiri dan kanan garis untuk memudahkan analisis peta. Gambar 1 menunjukkan bahwa kesulitan

item lebih rendah dari tingkat kesejahteraan peserta. Selain itu, kesulitan dari

240
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Vol 10, No Wicaksono,

2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

item antara -0,61 sampai +0,5 logit, sedangkan rata-rata peserta logit orang adalah +2,67 logit,

menunjukkan semakin banyak responden yang memiliki tingkat kesejahteraan yang tinggi.

Analisis DIF

Terakhir, analisis fungsi item yang berbeda (DIF) dilakukan untuk menguji bias item

variabel demografis dikumpulkan. Komposisi kelompok seimbang untuk analisis DIF, dengan

lebih dari 200 responden untuk setiap kelompok (lihat, misalnya, Boone et al., 2014; Bond & Fox,

2015), ditunjukkan pada Tabel 2. Data demografi gender kemudian dianalisis lebih lanjut.

Tabel 5.

Analisis fungsi item diferensial (DIF) berdasarkan gender dalam item WEMWBS
DIF DIF
Barang T Masalah.
Pria Perempuan Kontras

W8 -0,53 0,05 0,58 -4,75 0,0000

W10 -0,37 0,35 0,71 -5.90 0,0000

W12 0,72 -0,23 0,96 8.04 0,0000

Berdasarkan jenis kelamin, tiga item yaitu W8, W10, dan W12 diindikasikan mengalami DIF (Tabel 5). Zwick

(2012) menyatakan bahwa DIF ringan sampai sedang hadir jika parameter kesulitan dalam dua

jenis kelamin yang berbeda memiliki probabilitas yang signifikan dan kontras DIF lebih dari 0,43. Gambar 3 menunjukkan

bahwa responden laki-laki cenderung lebih banyak memberikan respon dibandingkan responden perempuan untuk item W8 (I feel

baik-baik saja dengan diri saya sendiri ) dan W10 (saya merasa percaya diri). Di sisi lain, responden perempuan cenderung memberi

lebih banyak tanggapan pada item W12 (saya merasa dicintai) daripada responden laki-laki.

241
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Diskusi

Penelitian ini bertujuan untuk memvalidasi WEMWBS versi bahasa Indonesia dengan model Rasch

pengukuran. Tabel 4 menunjukkan bahwa statistik kecocokan item berada pada semua kategori baik berkenaan dengan

kesulitan item, statistik kecocokan item, dan mean-square pakaian. Semua indeks kuadrat rata-rata item masuk

rentang kecocokan yang dapat diterima (0,6 – 1,4), dan korelasi ukuran titik lebih besar dari 0,4.

Tabel 3 dan Gambar 1 menunjukkan bahwa kategori skala peringkat tipe Likert berfungsi dengan baik seperti semua

timbangan memiliki item yang memuaskan dan keandalan orang. Temuan menunjukkan kemungkinan tinggi itu

individu atau item ukuran tinggi yang diharapkan akan memiliki skor lebih tinggi (kesejahteraan lebih tinggi) daripada

individu atau item ukuran rendah yang diproyeksikan. Laporan properti psikometrik ini mungkin ada

akurasi lebih dari beberapa penelitian sebelumnya (lihat, misalnya, Bartram, Sinclair & Baldwin,

2013; Stewart-Brown et al., 2009). Berbeda dengan penelitian sebelumnya (Bartram, Sinclair & Baldwin, 2013;

Stewart-Brown et al., 2009) yang mengambil kelompok individu tertentu sebagai pesertanya, ini

penelitian memilih partisipan secara acak dan dari berbagai latar belakang. Peserta acak

pemilihan penting untuk Analisis Ruam untuk menghasilkan hasil yang akurat karena dapat terpengaruh

heterogenitas sampling (Cappelleri, Lundy, Hays, 2015).

Selain itu, WEMWBS versi bahasa Indonesia memenuhi kriteria asumsi unidimensi karena konstruk yang

teridentifikasi telah dipertimbangkan dan secara efektif mengukur laten

sifat. Dalam WEMWBS, PCA residu item Rasch secara signifikan membuktikan kerentanan

ketergantungan pada korelasi item-total dan Alpha Cronbach dari model pengukuran lainnya

validitas konstruksi.

Pemisahan person dan item pada WEMWBS versi terjemahan sama atau lebih dari 3,

menunjukkan sensitivitas instrumen untuk membedakan peserta tingkat sifat rendah dan tinggi (Fisher,

2007). Namun, item skala paling sensitif saat mengukur sifat peserta di

tingkat sedang hingga rendah. Pengembangan instrumen WEMWBS berdasarkan Teori Tes Klasik

(CTT) pendekatan mungkin menjelaskan kecenderungan ini, karena pendekatan tersebut memiliki dua masalah utama yang dapat terjadi

mempengaruhi validitas: set item berlebihan dan kategori respon miring untuk sebagian besar item (Petrillo,

242
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Cano, McLeod, & Coon, 2015). Masalah ini dapat diatasi dengan menaikkan kesulitan item untuk meningkat

indeks pemisahan dan menambahkan item yang lebih sulit.

Mean untuk ukuran orang dalam skala tinggi, menunjukkan bahwa semua item dalam instrumen

cenderung terlalu sederhana untuk digunakan dalam sampel Indonesia. Begitu pula dengan penelitian di bidang kebudayaan

psikologi juga melaporkan temuan ini. Dalam konteks Portugis-Brasil, saran laporan itu

bahwa WEMWBS mudah digunakan dan komprehensif untuk mengukur kesejahteraan mental. Itu

Skor rata-rata WEMWBS dalam konteks Brasil adalah 51,8ÿ8 poin, diklasifikasikan sebagai tingkat sedang

kesejahteraan mental dibandingkan dengan norma Inggris (Santos et al., 2015). Apalagi penelitian tentang

Sampel Spanyol menemukan bahwa skor rata-rata WEMWBS adalah 53,5 (Lopez et al., 2013),

sedangkan penelitian pada sampel Cina menemukan skor rata-rata 51,48ÿ9,11 poin (Dong et al.,

2016). Dalam konteks bahasa Inggris, hasil norma WEMWBS menunjukkan bahwa faktor sosial ekonomi

berhubungan dengan tingkat kesejahteraan mental. Orang dengan pendapatan dan pendidikan yang lebih tinggi cenderung memiliki

skor kesejahteraan mental yang lebih tinggi daripada orang dengan pendapatan dan tingkat pendidikan yang lebih rendah (Stewart

Brown et al., 2015).

Demikian pula, dalam konteks budaya Indonesia, kesejahteraan sangat erat kaitannya dengan kesejahteraan finansial.

Istilah 'sejahtera' atau 'makmur' biasa disebut dengan pencapaian kesejahteraan finansial

(Maulana, Khawaja, & Obst, 2019). Rahayu (2016) lebih lanjut mengemukakan bahwa terjadi peningkatan secara total

pendapatan dan pendidikan yang lebih tinggi dapat menyebabkan lebih banyak kebahagiaan bagi masyarakat Indonesia. Di samping itu,

Maulana, Khawaja, dan Obst (2019) menambahkan bahwa penerimaan atau kepuasan masyarakat Indonesia

memainkan peran penting untuk kesejahteraan. Faktor-faktor ini bisa menjadi penjelasan utama mengapa

Sampel Indonesia cenderung memiliki tingkat kesejahteraan yang tinggi jika diukur dengan WEMWBS.

Analisis DIF menunjukkan bahwa 11 item tidak memiliki signifikansi statistik. Namun, temuan ini

mungkin tidak mempengaruhi pengukuran sebagai Pengukuran Rasch, lebih fokus pada psikometrik

atribut, menganggap uji signifikansi kurang berpengaruh. Tiga item menunjukkan bias, mungkin tidak

karena kualitas item, tetapi oleh respon khas responden Indonesia. Contohnya,

responden perempuan cenderung lebih bergairah dengan perhatian dari orang lain (item W12),

243
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

sedangkan responden laki-laki pada saat melihat ke diri sendiri cenderung lebih asertif (item W8

dan W10). Kecenderungan ini dapat mengindikasikan bahwa ketiga item dalam skala ini tidak invarian

pengukuran untuk laki-laki dan perempuan. Analisis menunjukkan bahwa versi bahasa Indonesia dari

Skor WEMWBS antara laki-laki dan perempuan tidak digeneralisasikan. Namun demikian, jenis kelamin

variabel harus diperhitungkan untuk meminimalkan bias gender ketika mengembangkan instrumen.

Kesimpulan

Hasil penelitian menyimpulkan bahwa skala WEMWBS versi Indonesia sudah terlihat

sifat psikometrik yang secara signifikan sesuai dengan model Rasch. Temuan berbeda dari

studi skala WEMWBS yang menggunakan model Rasch, terutama dalam hal peserta

distribusi skor kesejahteraan mental. Tabel 2 menunjukkan rerata kesejahteraan mental logit

skor adalah 2,67, di atas skala nol (0). Temuan menunjukkan bahwa peserta dalam hal ini

penelitian memiliki skor rata-rata kesejahteraan mental yang relatif tinggi.

Meskipun skalanya sesuai dengan model Rasch, tiga item, W8 (“Saya merasa nyaman dengan diri saya sendiri”), W10 (“Saya merasa nyaman dengan diri saya sendiri”), W10 (“Saya

merasa percaya diri”), dan W12 (“Saya merasa dicintai”), diterapkan secara berbeda untuk peserta pria

dan wanita. Dua item pertama, W8 dan W10, tampaknya lebih disukai pria daripada wanita

peserta. Sedangkan peserta perempuan cenderung lebih terbuka terhadap item W12. Lebih jauh

penelitian dengan pendekatan kualitatif, seperti wawancara, perlu dilakukan untuk mengungkapnya

pengaruh gender pada ketiga item tersebut. Analisis DIF juga dapat dilakukan berdasarkan

variabel lain yang berpotensi berpengaruh seperti usia, etnis, dan tingkat pendidikan. Selain itu, a

Pendekatan kualitatif perlu digunakan untuk mengungkap sejauh mana latar belakang partisipan

berhubungan dengan skor kesejahteraan. Penelitian lebih lanjut tentang kesejahteraan mental harus menggunakan campuran

mengungkapkan temuan yang lebih dalam dan lebih meyakinkan.

244
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Referensi
Bartram, DJ, Sinclair, JM, Baldwin, & David S. (2012). Validasi lebih lanjut dari Warwick
Skala Kesejahteraan Mental Edinburgh (WEMWBS) dalam profesi dokter hewan Inggris: Analisis
Rasch. Qual Life Res, 22: 379-391.

Obligasi, TG, & Rubah, CM (2015). Menerapkan model Rasch: Pengukuran fundamental dalam
ilmu manusia. Suntingan Ketiga. New York: Rute.
Boone , WJ , Staver , JR , & Yale , MS (2014). Analisis Rasch dalam ilmu manusia. New York:
Peloncat.

Brislin, RW (1970). Terjemahan balik untuk penelitian lintas budaya. Jurnal Lintas Budaya
Psikologi, 1(3) September 1970, hlm. 185-216.

Cappelleri, JC, Jason Lundy, J., & Hays, RD (2014). Tinjauan teori tes klasik dan teori respons item
untuk penilaian kuantitatif item dalam mengembangkan ukuran hasil yang dilaporkan
pasien. Terapi Klinis, 36(5), 648–662. https://doi.org/10.1016/
j.clinthera.2014.04.006.

Diener, E., Emmons, RA, Larsen, RJ, & Griffin, S. (1985). Kepuasan dengan skala kehidupan.
Jurnal Penilaian Kepribadian, 49:1, 71-75, DOI: 10.1207/s15327752jpa4901_13.

Dong, H. (2016). Terjemahan dan validasi Warwick-Edinburgh versi Cina

Skala Kesejahteraan Mental dengan peserta pelatihan keperawatan Sarjana. Jurnal Keperawatan
Psikiatri dan Kesehatan Mental. 23, 554-560.

Eggleston, E. (2001). Mengukur kesejahteraan psikologis perempuan di Indonesia. Wanita &

Kesehatan, 32(4), 156-162.

Engelhard, Jr.G. (2013). Pengukuran invarian: Menggunakan model Rasch dalam ilmu sosial, perilaku,
dan kesehatan. New York: Rute.

Fisher, WP Jr. (2007). Kriteria kualitas instrumen skala penilaian. Transaksi pengukuran rasch, 21(1)
hal. 1095 (tersedia di http://www.rasch.org/rmt/rmt211m.htm).

Ikink, JGM, Lamers, SM, & Bolier, JM (2012). Skala Kesejahteraan Mental Warwick-Edinburgh (WEMWBS)
sebagai ukuran kesejahteraan mental di Belanda. tesis master.

Karpavicÿiÿtÿ, S & Macijauskienÿ, J. (2016). Dampak kegiatan seni pada staf perawat dengan baik
menjadi: intervensi di tempat kerja. Jurnal Internasional Penelitian Lingkungan dan Kesehatan
Masyarakat. 13. 435.

245
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Keyes CLM (2013) Mempromosikan dan melindungi kesehatan mental positif: sejak dini dan
seringkali sepanjang umur. Dalam: Keyes C. (eds) Kesejahteraan
Mental. Springer, Dordrecht. https://doi.org/10.1007/978-94-007-5195-8_1

Linacre, JM (2012). Pengukuran Rasch banyak segi: Tutorial segi. Diterima dari
http://www.winsteps.com/a./ftutorial2.pdf

Lloyd, K., & Devine, P. (2012). Sifat psikometrik Skala Kesejahteraan Mental Warwick-Edinburgh
(WEMWBS) di Irlandia Utara. Jurnal Kesehatan Mental. Juni 2012, 21(3), 257-263.

Lopez, MA (2013). Adaptasi Kesejahteraan Mental Warwick-Edinburgh ke dalam bahasa Spanyol

Skala (WEMWBS) dan validasi awal dalam sampel siswa. Qual Life Res, 22: 1099- 1104.

Mangkualam, K. (2018) Hubungan Perilaku Mandiri dengan Mental Positif

kesehatan terhadap niat kewirausahaan mahasiswa psikologi. Konferensi Penelitian
Pascasarjana Internasional, Oktober 2018.

Maulana, H., Khawaja, N., & Obst, P. (2019). Pengembangan dan Validasi Skala Kesejahteraan
Indonesia. Jurnal Psikologi Sosial Asia, 22, 268-280.

Ng, SSW (2014). Terjemahan dan validasi Short Warwick versi Cina
Edinburgh Mental Well-being Scale untuk pasien gangguan jiwa di Hongkong. Psikiatri Arch
Asia Timur, 24:3-9.

Pandyaswargo, AH, Abe, N., & Fransiscus, Y. (2015) Pengukuran Objektif dan Subjektif
untuk pembangunan dan kesejahteraan: beberapa perspektif dari studi bottom-up di Indonesia.
Penelitian Lingkungan Global. 19/2015: 207-216.

Petrillo, J. (2015) Hasil yang dilaporkan pasien menggunakan teori tes klasik, teori respons item
dan teori pengukuran rasch untuk mengevaluasi ukuran hasil yang dilaporkan pasien:
perbandingan contoh yang berhasil. Nilai dalam Kesehatan, 18: 25 – 34.

Rahayu, TP (2016) Penentu kebahagiaan di Indonesia. Jurnal Ilmu Sosial Mediterania, 7(2), 234-239.

Rachmayani, D., & Ramadhani, N. (2014) Adaptasi bahasa dan budaya skala psychological well
being. Proceeding Seminar Nasional Psikometri. Universitas Muhammadiyah Surakarta.

Ringdal. R. (2017). Validasi dua versi Skala Kesejahteraan Mental Warwick-Edinburgh di

kalangan remaja Norwegia. Jurnal Kesehatan Masyarakat Skandinavia. 1-8.

246
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Ryan, RM, & Deci, EL (2001). Tentang kebahagiaan dan potensi manusia: Tinjauan penelitian tentang
kesejahteraan hedonis dan eudaimonik. Pendeta Tahunan Psych. 52:141-66.

Ryff, CD, & Keyes, CLM (1995). Struktur kesejahteraan psikologis ditinjau kembali. Jurnal Psikologi Kepribadian
dan Sosial, 69(4), 719–727. https://doi.org/10.1037/0022- 3514.69.4.719.

Santos, J. (2015). Adaptasi dan validasi lintas budaya dari skala kesejahteraan mental Warwick-
Edinburgh versi Brasil. Rev Assoc Med Bras, 61(3), 209-214.

Seasia, (2017), anak muda Indonesia memiliki kesehatan mental terbaik di dunia.
https://seasia.co/2017/02/11/indonesian-young-people-have-the-best-mental-wellbeing-in the-world.

Sumintono, B. & Widhiarso, W. (2014). Aplikasi model Rasch untuk penelitian ilmu-ilmu sosial
(edisirevisi) [Application of Rasch modeling in social science research, edisi revisi]. Cimahi: Rumah
Penerbitan Trimkom.

Stewart-Brown, S. (2015). Mengukur Kesejahteraan: Apa yang ditawarkan Skala Kesejahteraan Mental Warwick-
Edinburgh? Jurnal Kedokteran Integratif Eropa, Volume 7(4), 384-388.

Stewart-Brown, S. (2009). Validitas konstruk internal Warwick-Edinburgh Mental Well being Scale (WEMWBS):
analisis Rasch menggunakan data dari Survei Populasi Pendidikan Kesehatan Skotlandia. Kesehatan
dan Hasil Hidup Berkualitas, 7:15.

Stewart-Brown, S., & Janmohamed, K. (2008), Panduan Pengguna Warwick-Edinburgh Mental Well-being
Scale (WEMWBS). Sekolah Kedokteran Warwick, Universitas Warwick.

Taggart, F. (2013). Evaluasi lintas budaya dari skala kesejahteraan mental Warwick-Edinburgh
(WEMWBS)- studi metode campuran. Hasil Kesehatan dan Kualitas Hidup, 11:27.

Penyewa, R. (2007). Skala Kesejahteraan Mental Warwick-Edinburgh (WEMWBS): pengembangan dan Validasi
Inggris. Hasil Kesehatan dan Kualitas Hidup, 2007, 5:63.

Trousselard, M. (2016). Validasi Skala Kesejahteraan Mental Warwick-Edinburgh

(WEMWBS) dalam populasi psikiatri dan umum Prancis. Penelitian Psikiatri. 245 (2016) 282-290.

Van Zile-Tamsen, C. (2017). Menggunakan analisis Rasch untuk menginformasikan pengembangan skala
penilaian. Penelitian di Perguruan Tinggi, 58(8), 922-933.

247
Machine Translated by Google

Jurnal Psikologi Pendidikan, Kesehatan dan Masyarakat Wicaksono,

Vol 10, No 2, 2021. E-ISSN 2460-8467 Roebianto,
Sumintono.

Watson, D., Clark, LA, & Tellegen, A. (1988) Pengembangan dan Validasi Pengukuran Singkat Pengaruh
Positif dan Negatif: Skala PANAS, Jurnal Kepribadian dan Psikologi Sosial.
Vol.54, Tidak. 6, 1063-1070.

WEMWBS, “WEWMWBS Dalam Bahasa

Berbeda,”https://warwick.ac.uk/fac/sci/med/research/platform/wemwbs/using/translations/

SIAPA. (2004) Mempromosikan kesehatan mental: konsep, bukti yang muncul, praktik: Laporan ringkasan.
Jenewa, Organisasi Kesehatan Dunia.
Zwick, R. (2012) Tinjauan tentang prosedur penilaian fungsi item Diferensial ETS: aturan penandaan,
persyaratan ukuran sampel minimum, dan penyempurnaan kriteria. Seri Laporan Riset ETS.

248