Masalah yang paling pokok dalam menilai kinerja adalah menentukan kriteria.
Terdapat syarat-syarat tertentu untuk memutuskan baik atau tidaknya kriteria penilaian
kinerja. Cascio (1995:277-279) merekomendasikan syarat-syarat sebagai berikut:
1. Relevansi (relevance)
Sistem penilaian digunakan untuk mengukur kegiatan-kegiatan yang ada
hubungannya dimana kesesuaian antara hasil pekerjaan dan tujuan telah
ditetapkan.
2. Dapat diterima (acceptability)
Hasil dari sistem penilaian dapat diterima dalam hubungannya dengan kesuksesan
dan pelaksanaan pekerjaan.
3. Keterpercayaan (realibility)
Hasil dari sistem penilaian dapat dipercaya, konsisten dan stabil
4. Kepekaan (sensitivity)
Sistem penilaian cukup peka untuk membedakan kegiatan yang berhasil, cukup
berhasil ataupun gagal.
5. Praktis dalam penerapan (practicality)
Sistem penilaian dapat mendukung secara langsung tercapainya tujuan organisasi
atau perusahaan melalui peningkatan kinerja karyawan.
Komki (dalam Jhonson, 2004:62) mensyaratkan 5 kriteria yang harus dipenuhi
guna mencapai tujuan penilaian kinerja, yang disebut dengan SURF & C, yaitu:
S: Sampel atau contoh yang Iangsung diambil dan targetnya daripada mengandalkan
pada sumber sekunder atau yang sudah disaring.
U : Under atau targetnya haruslah berada di bawah pengendalian karyawan,
responsive terhadap usaha-usaha mereka untuk memenuhi kerjanya dan
pengaruh yang minimal dan faktor-faktor luar yang kurang terkait.
R : Reliability atau pam pengamat independennya secara konsisten sepakat
tentang pencatatan mereka dan nilai reliabilitas antar para penilainya
adalah sebesar 80 persen sampai (idealnya) 90 persen atau lebih baik saat
periode pengumpulan data formal.
F: Frequently atau targetnya perlu seringkali dinilal dan didasarkan pada dasar yang
kerap terjadi (setidaknya dua puluh kali dan idealnya tiga puluh kali) selama
periode penilaiannya; dan
C : Critical atau bukti-bukti menunjukkan targetnya bersifat kritis untuk
keberhasilan penyelesaian tugas. Datanya harus disediakan dan
menunjukkan hubungan yang signifikan antara target serta hasil yang
diharapkan.