Pedoman Administrasi Bank Soal Uji Kompetensi Nasional Tenaga Kesehatan Indonesia (Dokter, Dokter Gigi, Perawat, Bidan)

Health Professional Education Quality Project Direktorat Jenderal Pendidikan Tinggi Kementrian Pendidikan Nasional Jakarta 2010

Daftar Istilah
Istilah yang digunakan pada aplikasi SIPENA Area : pembagian wilayah kerja seperti Lokal, Regional, dan Nasional

Profesi/Bidang: kelompok profesi kesehatan seperti Medical, Dentistry, Nursery, dan midWifery Institusi : Universitas dengan atribut terkecil, contoh Universitas Padjadjaran Fakultas Kedokteran, atau POLTEKKES KEMENKES MEDAN - Prodi Kebidanan Langsa IBA CBT OSCE : Item Bank Administrator / Administrator Bank Soal (ABS) : Computer based testing : Objective Structured Clinical Examination

1. Pendahuluan Upaya peningkatan sistem ujian pada pendidikan dokter yang menjadi fokus Komponen 2 HPEQ Project mensyaratkan adanya suatu proses pelaksanaan ujian yang kredibel, efektif, dan efisien sesuai dengan tingkat kepentingan ujian yang tinggi (High Stake Exam). Salah satu metode ujian yang akan digunakan adalah ujian tertulis dengan dukungan teknologi berbasiskan computer atan disebut juga sebagai computer-based testing (CBT). Untuk itu maka diperlukan upaya untuk mempersiapkan suatu sistem pengelolaan Bank Soal yang sangat kredibel baik dari segi keamanannya, maupun kemudahan dari proses administrasinya dengan dukungan piranti perangkat lunak dan keras yang memadai. Di samping upaya peningkatan kualitas pembuatan dan review soal, diperlukan pula sumber daya manusia pendukung yang dapat secara handal dapat mengelola Bank Soal yang kredibilitasnya sangat tinggi baik dari sisi penguasaan teknis maupun tingkat kepercayaan dalam mengemban kerahasiaanya. Mengingat kepentingan hal itu maka diperlukan serangkaian pelatihan bagi para calon pengelola atau administrator Bank Soal baik di tingkat nasional maupun regional. Dengan demikian proses ujian yang berjalan akan dapat terlaksana dengan lancar dan aman. Untuk mendukung kelancaran mekanisme tersebut maka telah dirancang suatu sistem pengelolaan bank soal yang berbasiskan teknologi dan informasi dalam bentuk SIPENA 02.01 ss-100828. Pedoman ini dibuat untuk membantu pengelola bank soal dalam memahami mekanisme kerja sebagai pengelola bank soal baik di tingkat nasional, regional maupun lokal serta mempermudah pengenalan dan pengoperasionalan aplikasi yang digunakan.

2. Tingkatan Administrator bank soal 1. tingkat nasional, yang mengelola bank soal sesuai profesi di tingkat nasional 2. tingkat regional, yang mengelola bank soal sesuai profesi di regional/wilayah 3. tingkat lokal, yang mengelola bank soal di instutusi

3. Kriteria Adminitrator Bank Soal 1. Tingkat Administrator Nasional a. Jujur dan amanah b. Memiliki pemahaman tentang Student Assessment c. Memahami kompetensi tenaga kesehatan d. Memahami analisis soal e. Memahami software Item Bank NCE 2. Tingkat Administrator Regional a. = IBA National b. Koordinator IB Admin Regional yang dipilih mewakili Regional/wilayah masing-masing 3. Tingkat Administrator Lokal a. = IBA Nasional b. Ketua Unit/Tim Evaluasi di institusi 4. Tingkat Item Writer: a. Dosen/Pembuat soal sesuai bidang keilmuan

4. Tugas Administrator Bank Soal 1. Mengelola Bank Soal yang menjadi tanggung jawabnya 2. Mengelola soal yang telah memenuhi format dan struktur yang ditetapkan 3. Bekerja sama dengan Koordinator Pengembang Soal menyelenggarakan review soal 4. Disarankan tidak melakukan telaah terkait materi/substansi soal 5. Melakukan proses seleksi buku soal sesuai blue print yang telah ditetapkan 6. Membuat analisis soal dan memberikan feedback kepada pembuat soal 7. Melakukan sosialisasi item bank soft ware kepada pengguna 8. Bekerja sama dengan tenaga teknisi, melakukan pembaruan software dan pemeliharaan terhadap virus/threat/spam secara berkala 5. Peran IBA dalam Koordinasi Pengembangan Soal 1. IBA bekerja sama dengan koordinator pengembangan soal untuk menyelenggarakan review soal baik di tingkat fakultas/program studi, regional maupun nasional 2. Soal yang baik akan menjadi masuk ke dalam Item Bank 3. IBA menjalankan program pemilihan soal berdasarkan blue print yang telah ditentukan 4. IBA memberikan laporan rekapitulasi soal kepada Koordinator CBT & OSCE Center serta IBA regional/lokal

6. PERAN DAN TANGGUNG JAWAB IBA 6.1 Institutional/lokal 1. Peran: Administrator bank soal institusi adalah tim yang bertanggung jawab terhadap pengumpulan dan penyimpanan soal di tingkat institusi 2. Tanggung jawab: a. Collecting: mengumpulkan soal dari block/modul item administrators untuk selanjutnya memberikan soal dengan kriteria baik kepada IBA regional b. Analyzing: meminta tim reviewer untuk melakukan item review and analysis c. Sorting: memilah soal yang sudah dianalisis, apakah akan disimpan dalam bank soal atau didaur ulang/koreksi d. Banking: menjaga/maintenance of item bank (kapasitas menguasai software dari item bank) e. Reporting: melaporkan kepada penulis soal umpan balik dalam bentuk analisis soal kepada pembuat soal serta melaporkan bank soal kepada pimpinan fakultas. f. Pembuatan buku soal untuk ujian di insitusi yang menggunakan bank soal 6.2 Regional 1. Peran: Administrator bank soal regional adalah tim yang bertanggung jawab terhadap pengumpulan dan penyimpanan soal di tingkat wilayah regional 2. Tanggung jawab:

a. Collecting: mengumpulkan soal dari IBA lokal serta menyerahkan soal baik yang telah direview kepada IBA nasional b. Analyzing: meminta tim reviewer regional untuk melakukan item review and analysis c. Sorting: memilah soal yang sudah dianalisis, apakah akan disimpan dalam bank soal atau didaur ulang/koreksi d. Banking: menjaga/maintenance of item bank (kapasitas menguasai software dari item bank). e. Reporting: melaporkan kepada penulis soal umpan balik dalam bentuk analisis soal kepada pembuat soal serta melaporkan jumlah & kriteria bank soal kepada IBA lokal di wilayahnya f. Pembuatan buku soal untuk ujian formatif di wilayahnya 6.3 Nasional 3. Peran: Administrator bank soal nasional adalah tim yang bertanggung jawab terhadap pengumpulan dan penyimpanan soal untuk uji kompetensi nasional tenaga kesehatan 4. Tanggung jawab: a. Collecting: mengumpulkan soal dari IBA regional b. Analyzing: meminta tim reviewer nasional/peer review untuk melakukan item review dan analysis c. Sorting: memilah soal yang sudah dianalisis, apakah akan disimpan dalam bank soal atau didaur ulang/koreksi d. Banking: menjaga/maintenance of item bank (kapasitas menguasai software dari item bank). e. Reporting: melaporkan kepada penulis soal umpan balik dalam bentuk analisis soal kepada pembuat soal serta melaporkan jumlah & kriteria bank soal kepada IBA lokal di wilayahnya f. Pembuatan buku soal untuk ujian sumatif sesuai profesinya berdasarkan blue print

KETERANGAN 1. Pembuat soal membuat soal sesuai blue print dan format soal yang telah ditentukan. 2. Soal dikumpulkan kepada Lokal IB Admin 3. Lokal IB Admin bekerja sama dengan Local Item Developer menelaah soal sesuai format yang telah ditentukan 4. Soal yang sesuai format dimasukkan ke dalam Lokal IB 5. Lokal IB bisa digunakan untuk soal masing-masing institusi baik ujian formatif maupun sumatif 6. Lokal IB Admin mengumpulkan soal dari Lokal IB kepada Regional IB Admin sesuai jumlah soal yang diminta 7. Regional IB Admin bekerja sama dengan Coordinator Regional Item Development menelaah soal sesuai struktur yang telah ditentukan 8. Soal yang sesuai struktur dimasukkan ke dalam Regional IB 9. Regional IB bisa digunakan masing-masing regional untuk ujian formatif/try out 10. Soal dari Regional IB Admin diserahkan kepada National IB Admin soal ini menjadi National IB 1 11. National IB Admin menyelenggarakan Item Review Nasional untuk menelaah NIB 1 sesuai kompetensi 12. Soal yang baik ditelaah selanjutnya oleh Panel Expert Review 13. Soal yang diterima dimasukkan ke dalam National IB 2 14. National IB 2 digunakan untuk NCE dalam bentuk non scored item untuk uji coba 15. Soal dari Non scored item yang secara statistik analisis baik dimasukkan ke dalam NIB 3 16. Soal untuk NCE terdiri dari 150 soal NIB 3 dan 50 soal NIB 2 17. National IB Admin memberikan umpan balik terhadap analisis soal kepada pembuat soal

Prosedur Pengkodean Pembuat dan Reviewer Soal Uji Kompetensi Dokter Indonesia

1. Kriteria Pembuat Soal - Pembuat soal adalah ahli di bidang kedokteran dan kesehatan sesuai dengan garis besar materi ujian - Pembuat soal dapat berasal dari kalangan dosen, praktisi bidang kedokteran dan kesehatan - Pembuat soal mengetahui dan memahami kompetensi minimal yang harus dikuasai seorang dokter umum yang akan melakukan praktik kedokteran di Indonesia (Standar Kompetensi Dokter Indonesia) - Persyaratan di atas dibuktikan melalui Curriculum Vitae (CV) dan sertifikat pelatihan dalam bidang student assessment 2. Kriteria Reviewer Soal - Reviewer soal adalah ahli yang berpengalaman di bidang kedokteran dan kesehatan sesuai dengan garis besar materi ujian - Reviewer soal bisa berasal dari kalangan dosen, praktisi bidang kedokteran dan kesehatan - Reviewer soal telah pernah mengikuti pelatihan dalam bidang student assessment baik dalam maupun luar negeri - Persyaratan di atas dibuktikan melalui CV dan sertifikat pelatihan 3. Prosedur Pengkodean - Pembuat dan reviewer soal harus diberikan kode yang unik yang merupakan identitas yang bersangkutan dalam pengadministrasi soal - Pengkodean Pembuat dan Reviewer oal dilakukan oleh Administrator Bank Soal Institusi dan diklasifikasi berdasarkan: o Asal institusi dari pembuat dan reviewer soal o Bagian/departemen yang merupakan homebase dari pembuat dan reviewer soal o Nomor Urut pembuat/reviewer soal di institusi asal - Kode institusi asal pembuat/reviewer soal adalah sebagai berikut: Daftar Kode Institusi Pendidikan Dokter di Indonesia Nama Institusi Universitas Syiah Kuala Universitas Abulyatama Universitas Sumatra Utara Universitas Islam Sumatra Utara Universitas Methodist Indonesia Universitas Andalas Universitas Baiturahmah Universitas Riau Universitas Lampung Kode Institusi 01 02 03 04 05 06 07 08 09

Nama Institusi Universitas Malahayati Universitas Sriwijaya Universitas Jambi Universitas Trisakti Universitas Kristen Krida Wacana Universitas Pelita harapan Universitas Indonesia Universitas Katolik Atmajaya Universitas YARSI Universitas Muhammadiyah Jakarta Universitas Kristen Indonesia Universitas Tarumanagara Universitas Pembangunan Nasional Veteran Universitas Padjadjaran Universitas Kristen Maranatha Universitas Jenderal Achmad Yani Universitas Islam Bandung Universitas Diponegoro Universitas Islam Sultan Agung Universitas Jenderal Soedirman Universitas Gajah Mada Universitas Muhammadiyah Yogyakarta Universitas Sebelas Maret Universitas Islam Indonesia Universitas Muhammadiyah Surakarta Universitas Brawijaya Universitas Muhammadiyah Malang Universitas Islam Malang Universitas Jember Universitas Airlangga Universitas Hang Tuah Universitas Wijaya Kusuma Surabaya Universitas Udayana Universitas Mataram Universitas Islam Al-Azhar Mataram

Kode Institusi 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44

Nama Institusi Universitas Lambung Mangkurat Universitas Mulawarman Universitas Hasanuddin Universitas Muslim Indonesia Universitas Sam Ratulangi Universitas Cendrawasih Universitas Tanjungpura Universitas Syarif Hidayatullah Universitas Muhammadiyah Palembang Universitas Abdurrab Universitas Batam Universitas Bengkulu Universitas Swadaya Gunung Jati Universitas Warmadewa Universitas Nusa Cendana Universitas Pattimura Universitas Muhammadiyah Makassar Universitas Tadulako Universitas Muhammadiyah Semarang Universitas Haluoleo-kendari Universitas Prima Indonesia Universitas Muhammadiyah Sumatera Utara Universitas HKBP Nomensen-medan Universitas Malikussaleh- Lhokseumawe Institut Ilmu Kesehatan Bhakti Wiyata Kediri Universitas Al Khairaat - palu Universitas Indonesia Timur Universitas Kristen Krida Duta Wacana Institusi selain Institusi Pendidikan Dokter

Kode Institusi 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73

Kode bagian/depatemen home base asal pembuat/reviewer soal adalah sebagai berikut: Daftar Kode Asal Bagian/Departemen Pembuat dan Revier Soal UKDI Departemen/Bagian Kimia Medik 01 Kode Bagian/Departemen

Departemen/Bagian Biologi Medik Histologi Anatomi Biokimia Faal Farmakologi Farmasi Medik Mikrobiologi Parasitologi Ilmu Kesehatan Masyarakat Ilmu Gizi Epidemiologi dan Biostatistika Patologi Anatomi Patologi Klinik Anestesiologi Ilmu Kedokteran Jiwa Ilmu Kesehatan Anak Ilmu Penyakit Dalam Ilmu Penyakit Kulit dan Kelamin Ilmu Penyakit Saraf Radiologi Ilmu Kedokteran Nuklir Ilmu Bedah Ilmu Bedah Saraf Ilmu Bedah Orthopaedi Ilmu Kebidanan dan Penyakit Kandungan Ilmu Penyakit Mata Ilmu Penyakit Gigi dan Mulut Ilmu Penyakit THT Ilmu Kedokteran Kehakiman Ilmu Kedokteran Fisik dan Rehab Bioetik dan Humaniora Kedokteran Keluarga Kardiologi dan Kedoktean Vaskuler -

Kode Bagian/Departemen 02 03 04 05 06 07 08 09 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35

Urutan pengkodean pada pembuat/reviewer soal adalah sebagai berikut: Kode Institusi Kode Bagian/Departemen Nomor Urut XX XX XXXX

Contoh (yang dilakukan oleh Administrator Bank Soal di Universitas Padjadjaran) : Asal Institusi Universitas Padjadjaran Bagian Ilmu Penyakit Mata Kode 23-29-001

Nama Lengkap (sesuai CV) Arif S. Kartasasmita, dr., SpM., M.Kes

Mohammad Ghozali, dr. Sari Puspa dewi, dr., MHPE

Universitas Padjadjaran Universitas Padjadjaran

Biokimia Biokimia

23-05-002 23-05-003

Bagi pembuat/reviewer soal yang berasal dari institusi selain institusi pendidikan dokter, seperti praktisi kesehatan di Puskesmas, Rumah Sakit non Pendidikan, Perhimpunan, Kolegium, dan lain-lain, maka yang bersangkutan harus dapat memenuhi kriteria pembuat/reviewer soal serta menyampaikan soal ke Adminstrator Bank Soal Regional. Pengkodean pembuat/reviewer soal adalah sebagai berikut: o Kode asal institusi diberikan kode 73 o Kode bagian/departemen disesuaikan dengan bidang ilmu/kepakaran pembuat/reviewer soal

Prosedur Penggunaan Aplikasi Administrasi Bank Soal (Item Bank)

Log In
Fitur ini adalah gerbang awal seorang pengguna aplikasi dalam mengelola soal, dengan cara memasukkan username dan password yang telah disediakan - Level pengguna aplikasi beserta fitur-fitur yang menyertainya adalah sebagai berikut: 1. Item Bank Administrator a. Menginput soal baru b. Mengedit soal c. Menambahkan/mengubah spesifikasi soal berdasarkan tinjauan, penulis soal dan referensi d. Menghapus soal e. Mencari soal yangtersimpan dalam bank sesuai dengan tinjauan yang diinginkan f. Menginput jenis/klasifikasi tinjauan soal g. Memproduksi dan mengedit Buku Ujian h. Menambahkan, mengedit dan menghapus pengguna aplikasi bank soal, seperti Penulis dan Penelaah Soal i. Melakukan back up pada aplikasi 2. User Biasa (Penulis Soal/Item Writer, Penelaah Soal/Reviewer Soal) a. Menginput soal baru b. Mengedit soal c. Menambahkan/mengubah spesifikasi soal berdasarkan tinjauan, penulis soal dan referensi d. Menghapus soal e. Mencari soal yangt ersimpan dalam bank sesuai dengan tinjauan yang diinginkan - Item Bank Administrator memiliki kewenangan dalam menambahkan, mengedit dan menghapus pengguna aplikasi bank soal, seperti Penulis dan Penelaah Soal. Sehingga username dan password User Biasa ditentukan dan diinput oleh Item Bank Administrator. - Masukan username dan password pada kolom yang disediakan

Home
Berikut adalah tampilan yang akan muncul di layar komputer Anda setelah sukses menginstall aplikasi dan log in:

Item Bank
Kegunaan fitur Item Bank: o Menginput soal baru o Mereview soal o Menambahkan/mengubah spesifikasi soal berdasarkan tinjauan, penulis soal dan referensi o Menghapus soal o Mencari soal yang tersimpan dalam bank sesuai dengan tinjauan yang diinginkan o Mereview soal berdasarkan formulir/cek lis review soal Cara menginput soal baru: 1. Pada tampilan Home, pilih dan klik menu drop down box Item Bank 2. Pilih Data Soal, maka akan muncul tampilan sebagai berikut:

3. Pilih dan Klik ikon TAMBAH untuk menambah soal baru 4. Pilih tinjauan soal sesuai dengan spesifikasi soal yang diinginkan 5. Ketik/Inputkan soal pada kolom yang telah disediakan yaitu Vignette, Jawaban, Komentar Soal, Penulis Soal dan Referensi 6. Menginputkan jawaban soal degan cara memilih/mengklik kotak yangterdapat di sebelah kanan kolom jawaban 7. Kolom komentar soal disediakan bagi penulis soal untuk memberikan pernyataan yang berkaitan dalam menentukan jawaban soal 8. Pilih/klik Save untuk menyimpan soal yang telah diinputkan 9. Anda akan kembali pada tampilan Data Soal Cara mencari dan mereview soal yang tersimpan dalam bank soal: 1. Pilih Data Soal 2. Pilih klasifikasi pencarian soal berdasarkan tinjauan yang disediakan atau pilih soal yang akan diedit dengan memilih ikon tanda panah pada sudut kanan bawah pada tampilan Data Soal 3. Pilih/klik ikon Buku dan Pensil untuk memulai mengedit soal 4. Pilih tinjauan soal sesuai dengan spesifikasi soal yang diinginkan 5. Ketik/Inputkan soal pada kolom yang telah disediakan yaitu Vignette, Jawaban, Komentar Soal, Penulis Soal dan Referensi 6. Menginputkan jawaban soal degan cara memilih/mengklik kotak yang terdapat di sebelah kanan kolom jawaban 7. Kolom komentar soal disediakan bagi penulis soal untuk memberikan pernyataan yang berkaitan dalam menentukan jawaban soal 8. Pilih ikon review soal 9. Isi dan pilih formulir review soal 10. Pilih/klik Save untuk menyimpan soal yang telah diinputkan 11. Anda akan kembali pada tampilan Data Soal Cara mencari dan menghapus soal yang tersimpan dalam bank soal: 1. Pilih Data Soal 2. Pilih klasifikasi pencarian soal berdasarkan tinjauan yang disediakan atau pilih soal yang akan diedit dengan memilih ikon tanda panah pada sudut kanan bawah pada tampilan Data Soal

3. Pilih/klik ikon Tempat Sampah untuk menghapus

Data Soal
Fitur ini memberikan laporan/rekapitulasi dari soal yang tersimpan dalam Bank Soal berdasarkan tinjauan soal Contoh tampilan rekapitulasi soal adalah sebagai berikut:

Prosedur Penggunaan Aplikasi Administrasi Bank Soal (Adminsitrasi Pengguna)

Admin User
Kegunaan fitur Admin User: 1. Mengaktifkan penggunaan aplikasi 2. Menambahkan dan mengaktifkan pengguna aplikasi 3. Mendaftarkan username dan password bagi para pengguna aplikasi 4. Menghapus pengguna aplikasi 5. Mencari dan menampilkan daftar pengguna aplikasi yang didaftarkan oleh Item Bank Administrator berdasarkan nama

1. 2. 3. 4. 5.

Cara mengaktifkan aplikasi Pada saat pertama kali log in, ketikkan username: admin. Pasword : admin Pilih menu Data User dan pilih/klik Aktivasi Pengguna. Pilih/klik TAMBAH Masukkan data diri Item Bank Administration. Hal-hal yang harus diperhatikan dalam mendaftarkan username dan password: Item Bank Administrator adalah tim atau staf pengajar yang ditunjuk/ditugaskkan oleh institusi untuk mengelola soal, baik di tingkat institusi, regional dan nasional. Username dan password harus unik dan mudah dihapal oleh empunya Item Bank Administrator memilih tipe user dan tipe level Administrator, sehingga memiliki kewenangan dalam menambah, menghapus dan mengedit user lain seperti Item Writer, Item Reviewer, Item Bank Admin, Exam Coordinator dan Student Item Bank Administrator dapat dibuat lebih dari 1 orang, sesuai SOP/Kebijakan yang berlaku 6. PIlih/klik Save. Pada layar akan muncul tampilan di bawah ini:

7. Pada tampilan Home, pilih Aktifasi Pengguna 8. Pilih/klik aktifkan sesuai dengan nama user yang akan diaktifkan 9. Pilih/klik aktifasi instansi. Prosedur ini bertujuan untuk mengaktifkan institusi asal dari Item Bank Adminsitrator dan pengguna lainnya 10. Aktifkan institusi dengan memilih dan klik institusi untuk mengaktifkan, seperti yang muncul pada tapilan di bawah ini: 11. Pilih Log Out 12. Masukkan username dan password Item bank Administrator Cara mendaftarkan, mengedit dan menghapus username dan password bagi para pengguna aplikasi: 1. Pilih admin user, kemudian klik aktifasi pengguna 2. Pilih TAMBAH untuk menambah pengguna aplikasi

3. Pilih ikon loupe/kaca pembesar untuk melihat detil input 4. Pilih ikon pensil untuk mengedit data input pengguna 5. Pilih ikon tanda silang unutk menghapus user.