P.854900.047.

01
Memberikan Kontribusi Dalam
Validasi Asesmen
Siklus PDCA
dalam Proses
Sertifikasi
 P. 854900.047.01
MEMBERIKAN KONTRIBUSI DALAM
VALIDASI ASESMEN

VALIDASI

1. 2. 3.
Menyiapkan proses Memberikan Memberikan
validasi kontribusi kontribusi untuk
dalam proses validasi hasil validasi

PLAN DO CHECK ACTION

❑ Proses ini dilakukan di LSP dengan ditetapkan Team Validasi oleh ketua LSP
 APAKAH VALIDASI ASESMEN ?

PROSES MEMERIKSA MEMASTIKAN

DALAM RANGKA
KUALITAS ASESMEN : PEMENUHAN
MEMPERBAIKI
• Meninjau TERHADAP :
KUALITAS
• Membandingkan • Prinsip Asesmen
ASESMEN
• mengevaluasi • Aturan Bukti
 • Proses Asesmen
• Rencana Asesmen
• Acuan Pembanding
• Acuan Pembanding lainnya
MENINJAU •
•
Penerapan metode Asesmen
Penerapan perangkat Asesmen
• Bukti-bukti yang kumpulkan
• Proses pengambilan keputusan
MEMBANDING • PRINSIP ASESMEN (VRFF)
KAN • ATURAN BUKTI (VATM)
EVALUASI
▪ VALID ▪ VALID/SAHIH
Proses, metoda, perangkat
asesmen mencerminkan
Bukti mencerminkan
persyaratan skill &
syarat unit kompetensi
knowledge yang pada unit
kompetensi yang relevan
▪ RELIABLE
Terkait konsistensi hasil- ▪ ASLI/OTENTIK
hasil bukti
▪ FLEXIBLE
Milik peserta sendiri
▪ TERKINI/TERBARU
Mencerminkan kebutuhan
peserta
Terkait usia bukti
▪ FAIR
▪ MEMADAI/CUKUP
Terkait kualitas dan
Mempertimbangkan kuantitas bukti yang
karakteristik peserta dikumpulkan
• Memberikan
Rekomendasi Perbaikan
• Memastikan Perbaikan
• Diterapkan pada Praktek
Asesmen
 SEBELUM ASESMEN
• Untuk melihat desain perangkat asesmen, interpretasi
unit kompetensi.
• Untuk memastikan bahwa asesor memiliki
pemahaman secara umum.
Kapan
validasi PADA SAAT ASESMEN

dilakukan? • Untuk melihat proses asesmen dan bagaimana asesor

mengorganisasikan event, melaksanakan aktivitas,
mengelola perangkat, mengkomunikasikan kepada
kandidat.

SETELAH ASESMEN

• Untuk melihat keefektifan asesmen yang dilaksanakan,

keakuratan dan konsistensi keputusan.
Bahan Validasi : Proses Validasi
No Bahan Validasi Sebelum Proses Setelah
1 SOP Peleksanaan Asesmen V V V
2 Skema Sertifikasi terkait V - V
3 Standar kompetensi V - V
4 Fomulir APL-01 dan APL-02 V - V
5 FR. MAPA-01 dan 02 terkait Skema yang di Ujikan V - -
6 Perangkat/ Instrumen asesmen ( FR.IA - …) V V V
7 Formulir Pelaksanaan Asesmen ( FR.AK- …) V V V
8 Tata Tertib Pelaksanaan Asesmen V V -
9 Tempat asesmen ( kelas dan Bengkel/ Lab) V V -
10 Perlengkapan dan Bahan asesmen V V -
11 Persiapan Personil TUK V V -
12 SOP Pelaksanaan Validasi V V V
13 Rekaman Laporan Asesmen ( FR.AK-05) - - V
14 Rekaman Tinjauan Asesmen ( FR.AK-06) - - V
15 Daftar Hadir - - V
 1 MENYIAPKAN PROSES VALIDASI

Tujuan dan Kontek Pendekatan Acuan Dokumen

Fokus Validasi Validasi dalam Validasi Pembanding terkait

Pendekatan Validasi : • Standar • Skema sertifikasi

- Panel Asesmen kompetensi • SKKNI/SK3/SKI
Didiskusikan dengan
- Pertemuan • SOP/IK • Perangkat
orang yang RELEVAN Moderasi • Manual asesmen
Orang yang RELEVAN meliputi : - Mengkaji Perangkat
Instruction/book • Peraturan/Pedo
Asesor kompetensi (wajib) Asesmen
- Acuan Pembanding • Standar Kinerja man
Lead Asesor
Manager, supervisor - Uji Coba Perangkat
Tenaga ahli di bidangnya - Umpan Balik dari
Koord. Pelatihan Clien
Anggota asosiasi industry/profesi
CONTOH : Wati Fathonah 28/11/2022
Country 3 Hotel Ibis Samarinda

Analisis Penhujian Laboratorium

5.7.1

▪ Tujuan, Fokus
▪ Konteks Validasi,
▪ Pendekatan Validasi

Sebelum Asesmen

Saat Asesmen

Setelah Asesmen
 Orang yang relevan Nama Hasil konfirmasi/diskusi tujuan, fokus & konteks
Asesor kompetensi (wajib) 1. Nani Hartari Disetujui divalidasi :

• Orang yang relevan, 2. • Mengevaluasi perangkat

• Acuan Pembanding, 3. • Dengan kolega asesor
• Dokumen Terkait Lead Asesor • Mengkaji perangkat

Manager, supervisor

Tenaga ahli di bidangnya

Koord. Pelatihan

Anggota asosiasi
industry/profesi
2 MEMBERIKAN KONTRIBUSI DALAM PROSES VALIDASI
(Melaksanakan Validasi Asesmen)
 PERIODE MKVA

2. Memberikan kontribusi dalam proses validasi

Keterampilan komunikasi yang digunakan PRO AKTIF

dalam kegiatan validasi :
ACTIVE LISTENING

Media Sosial (WA, Telegram)

Email

Pemenuhan Terhadap :
Aspek-Aspek Dalam Kegiatan Validasi
No. Aturan Bukti Prinsip Asesmen
(Meninjau, Membandingkan, Mengevaluasi)
V A T M V R F F
Aspek – aspek
1. Proses asesmen
yang dinilai
dalam Validasi 2. Rencana asesmen X Jika ada temuan
3. Interpretasi standar kompetensi maka berikan
tanda X
4. Interpretasi acuan pembanding lainnya
5. Penyeleksian dan penerapan metode asesmen
6. Penyeleksian dan penerapan perangkat
SEBELUM ASESMEN asesmen
7. Bukti-bukti yang dikumpulkan
SAAT ASESMEN
8. Proses pengambilan keputusan
SETELAH PROSES 9.
 3 MEMBERIKAN KONTRIBUSI UNTUK HASIL
VALIDASI
( Laporan Hasil Validasi)
IMPLEMENTASI
DISKUSI, ANALISIS, & REKOMENDASI – PERUBAHAN
KESEPAKATAN REKOMENDASI ASESMEN HASIL
TEMUAN VALIDASI VALIDASI VALIDASI
 MEMBERIKAN KONTRIBUSI UNTUK HASIL VALIDASI

TEMUAN – TEMUAN VALIDASI REKOMENDASI PENINGKATAN

ASESMEN
1. …………………………………. 1. ………………………………….

2. …………………………………. 2. ………………………………….

3. …………………………………. 3. ………………………………….

4. …………………………………. 4. ………………………………….
 P–L–O–R
• Masalah yang diidentifikasi sebagai Ketidaksesuaian
PROBLEM
• Temukan masalahnya…….

• Menunjukkan dimana masalah tersebut Ditemukan

LOCATION
• Tunjukkan lokasi masalah ….

OBJECTIVE • Bukti objektif yang ditemukan Ketidaksesuaian

EVIDENCE • Paparkan bukti kalau itu menjadi masalah ……….

• Acuan/regulasi yang digunakan dan harus

REFERENCE
• Sampaikan sumber referensi…….
 3. Memberikan kontribusi untuk hasil asesmen
CONTOH :
Temuan-temuan validasi : Rekomendasi-rekomendasi untuk meningkatkan
Temuan praktek asesmen
1. Realibilitas asesmen belum dapat dipastikan
terbukti pada FR.IA-02,03,07 ditemukan belum Interpretasi ulang KUK untuk
memenuhi dimensi kompetensi, tidak sesuai menetapkan dimensi kompetensi
dengan P85ASM00.001.2.
2.

3.
Penulisan pada
TEMUAN VALIDASI Problem P REALIBILITAS asesmen belum dapat dipastikan,
mengikuti aturan 4.
Location L
PLOR
terbukti pada FR.IA-02,03,07

Objective Evidence O ditemukan belum memenuhi dimensi kompetensi,

Reference R tidak sesuai dengan P85ASM00.001.2.

CONTOH :

Rencana Implementasi perubahan/perbaikan pelaksanaan asesmen :

Implementasi No. Kegiatan perbaikan sesuai rekomendasi Waktu Penanggungjawab
perubahan Penyelesaian

1. Perbaikan Intrumen FR.IA-

28/11/2022 Nani Hartari
02,03,07 untuk memenuhi
dimensi kompetensi

2.
FR.VA MEMBERIKAN
KONTRIBUSI DALAM VALIDASI
ASESMEN Cek : Dimensi Kompetensi (IA 03 & IA 07)

CONTOH :
Kuning : Problem
Hijau : Location
Ungu : Objective/ Evidance
Abu2 : Reference
 Prinsip-prinsip asesmen
Validitas
• Perangkat asesmen secara jelas menentukan tujuan perangkat, populasi sasaran, bukti yang akan dikumpulkan,
aturan pengambilan keputusan, persyaratan pelaporan serta batasan dan batasan perangkat ?
• Bukti bagaimana persyaratan literasi dan numerasi Unit kompetensi telah dipatuhi (validitas konstruksi)
Reliabilitas
• Jelas dan mudah dibaca:
• Struktur dan tata letak disusun secara logis dan mudah diikuti

• Bahasa Indonesia/ Inggris yang jelas

• Apakah asesor menyediakan informasi yang jelas terhadap persyaratan asesmen?

• Instruksi yang jelas bagi asesor

• Instruksi yang jelas bagi asesi, termasuk waktu dan peralatan yang diperlukan untuk mengerjakan asesmen.

• Terdapat identitas yang jelas dari versi yang berlaku

• Mudah untuk diadministrasikan:

• Terdapat
• Nama asesor dan asesi
• Tanggal, lokasi asesmen
• Komentar tentang kualitas bukti yang dibutuhkan
• Hasil asesmen
 Prinsip-prinsip asesmen
Validitas
• Apakah aktifitas asesmen memenuhi seluruh bagian dari acuan pembanding?
Reliabilitas
• Apakah aktifitas secara konsisten mengukur apa yang seharusnya diukur?
• Apakah instruksi-instruksi yang disediakan untuk kandidat memastikan
penerapan yang konsisten dari aktifitas-aktifitas?
• Dapatkah aktifitas-aktifitas digunakan oleh asesor yang berbeda pada situasi yang
berbeda dengan kandidat yang berbeda untuk mencapai hasil yang konsisten?
Fleksibilitas
• Apakah aktifitas memenuhi kebutuhan kandidat dan organisasi?
Fair / Keadilan
• Apakah aktifitas memenuhi kebutuhan dan karakteristik kandidat?
• Apakah aktifitas bebas dari bias dan apakah dapat diadaptasikan untuk mencegah
hambatan-hambatan pada individu dengan kebutuhan khusus?
 Aturan-aturan Bukti

Validitas
• Apakah bukti diarahkan pada seluruh bagian dari acuan pembanding?

Asli
• Apakah bukti yang dikumpulkan merupakan pekerjaan kandidat sendiri?

Terkini
• Apakah bukti terkini?

Memadai
• Apakah cukup bukti untuk memenuhi seluruh bagian acuan pembanding?
 Proses Validasi
Contoh temuan:
PLOR
Validitas Perangkat Asesmen Uji Lisan (IA 07 PERTANYATAAN LISAN, pertanyaan no 1) belum bisa
dipastikan, terbukti pertanyaan belum spesifik kepada alat. Tidak sesuai Q.86EMS01.003.1 -
Melaksanakan Pemeliharaan Alat Bedah Dan Anestesi Teknologi Sederhana

Unit kompetensi Asesor Kompetensi Asesor :

P.85ASM00.001.2 Merencanakan Aktivitas dan Proses Asesmen
P.85ASM00.003.2 Melaksanakan Asesmen
P.854900.047.1 Memberikan Kontribusi dalam Validasi Asesmen
Unit kompetensi Asesor Kompetensi Asesor : Kuning : Problem
Hijau : Location
P.85ASM00.001.2 Merencanakan Aktivitas dan Proses Asesmen Ungu : Objective/ Evidance
P.85ASM00.003.2 Melaksanakan Asesmen Abu2 : Reference

P.854900.047.1 Memberikan Kontribusi dalam Validasi Asesmen

KETIDAKSESUAIAN TINDAKAN TANGGAL

NO. ACUAN STATUS
(PLOR= Problem, Location, Objective evidence, Reference) PERBAIKAN PERBAIKAN

Validitas Perangkat Asesmen Uji Tulis belum bisa dipastikan, terbukti P.85ASM00.001.2 Revisi soal Uji 06/07/2019 Sudah / Belum *)
dimensi kompetensi CMS dan TRS belum terpenuhi didalam IA 03, IA tulis
1 07. Tidak sesuai P.85ASM00.001.2 Merencanakan Aktivitas dan Proses
Asesmen
Fleksibilitas dari perangkat asesmen belum bisa dipastikan, terbukti
rencana asesmen dan perangkat asesmen hanya dibuat sebagian
2
berupa : metode observasi dan uji tulis. Belum sesuai dengan
P.85ASM00.001.2 Merencanakan Aktivitas dan Proses Asesmen
Validas keputusan asesmen belum bisa dipastikan, terbukti pengambilan
3 keputusan belum melalui pleno komite sertifikasi di LSP. Tidak sesuai
PBNSP 301
Realibilitas pelaksanaan asesmen belum bisa dipastikan. Terbukti
4 pelaksanaan asesmen dilakukan di TUK yang belum terverifikasi. Belum
sesuai PBNSP 206
Fairness pelaksanaan asesmen belum bisa di pastikan. Terbukti asesor
5 melaksanakan asesmen cenderung menyudutkan asesi. Belum
sesuainPBNSP 201 Klausal 9, P85ASM00.003.2 Melaksankan Asesmen
Terima Kasih