SKRIPSI
Disusun oleh:
Rizal Halim Adirasyid
NIM: 155150400111078
SKRIPSI
Disusun Oleh :
Rizal Halim Adirasyid
NIM: 155150400111078
Pembimbing I Pembimbing II
Hanifah Muslimah Az-Zahra, S.Sn., M.Ds. Nanang Yudi Setiawan, S.T., M.Kom.
NIK: 2016078908112001 NIK: 197606192006041001
Mengetahui
Ketua Jurusan Sistem Informasi
ii
PERNYATAAN ORISINALITAS
iii
PRAKATA
Alhamdulillah, puji syukur kehadirat Allah SWT atas limpahan rahmat dan
hidayah-Nya sehingga penulis diberi kesehatan dan dapat menyelesaikan skripsi
ini yang berjudul “Evaluasi Usability Situs Web Resmi Pemerintah Kabupaten
Sidoarjo Menggunakan Metode Usability Testing dan Evaluasi Heuristic” dengan
baik dan tepat waktu. Penulis menyadari bahwa penulisan skripsi ini tidak dapat
berhasil tanpa adanya bantuan dari beberapa pihak. Oleh karena itu penulis ingin
mengucapkan terima kasih kepada :
1. Kedua orang tua penulis yang selalu memberikan doa, semangat,
serta motivasi agar terselesaikannya skripsi ini.
2. Bapak Dr. Eng. Herman Tolle, S.T., M.T. sebagai Ketua Jurusan Sistem
Informasi Universitas Brawijaya.
3. Bapak Yusi Tyroni Mursityo, S.Kom., M.AB. sebagai Ketua Program
Studi Sistem Informasi Universitas Brawijaya.
4. Ibu Hanifah Muslimah Az-Zahra, S.Sn., M.Ds. sebagai Dosen
Pembimbing Skripsi 1.
5. Bapak Nanang Yudi Setiawan, S.T., M.Kom. sebagai Dosen
Pembimbing Skripsi 2.
6. Seluruh peserta pengujian yang telah terlibat dalam skripsi ini.
7. Seluruh teman-teman dan kerabat saya yang telah mendoakan dan
membantu dalam menyelesaikan skripsi ini.
Semoga skripsi ini dapat bermanfaat dalam memberikan saran
rekomendasi kepada pengembangan situs web Kabupaten Sidoarjo dan untuk
penelitian selanjutnya.
Penulis
rhalimrasyid@gmail.com
iv
ABSTRAK
Kata kunci: evaluasi, usability, situs web pemerintah, usability testing, evaluasi
heuristic
v
ABSTRACT
vi
DAFTAR ISI
PENGESAHAN ...........................................................................................................ii
PERNYATAAN ORISINALITAS ................................................................................... iii
PRAKATA.................................................................................................................. iv
ABSTRAK ................................................................................................................... v
ABSTRACT ................................................................................................................ vi
DAFTAR ISI .............................................................................................................. vii
DAFTAR TABEL .......................................................................................................... x
DAFTAR GAMBAR ................................................................................................... xii
DAFTAR LAMPIRAN ................................................................................................ xv
BAB 1 PENDAHULUAN............................................................................................. 1
1.1 Latar Belakang........................................................................................ 1
1.2 Rumusan Masalah.................................................................................. 3
1.3 Tujuan .................................................................................................... 3
1.4 Manfaat.................................................................................................. 3
1.5 Batasan Masalah .................................................................................... 3
1.6 Sistematika Pembahasan ....................................................................... 4
BAB 2 LANDASAN KEPUSTAKAAN ........................................................................... 5
2.1 Penelitian Sebelumnya .......................................................................... 5
2.2 Profil Kabupaten Sidoarjo ...................................................................... 5
2.2.1 Visi dan Misi .................................................................................. 5
2.2.2 Struktur Organisasi........................................................................ 6
2.2.3 Situs Web Kabupaten Sidoarjo...................................................... 7
2.3 Situs Web ............................................................................................. 15
2.3.1 Kualitas Situs Web ....................................................................... 15
2.4 Evaluasi ................................................................................................ 15
2.5 Usability ............................................................................................... 15
2.6 Usability Testing................................................................................... 17
2.7 Heuristic Evaluation ............................................................................. 17
2.7.1 Proses Heuristic Evaluation ......................................................... 19
2.8 Severity Ratings.................................................................................... 20
vii
2.9 Evaluator .............................................................................................. 21
2.10 Skenario Tugas ................................................................................... 22
2.11 Kuesioner ........................................................................................... 22
2.12 System Usability Scale........................................................................ 23
2.13 Wawancara ........................................................................................ 24
2.14 Observasi ........................................................................................... 25
2.15 Nonprobability Sampling ................................................................... 25
2.15.1 Purposive Sampling ................................................................... 25
BAB 3 METODOLOGI ............................................................................................. 27
3.1 Identifikasi Masalah ............................................................................. 28
3.2 Studi Literatur ...................................................................................... 28
3.3 Persiapan Pengumpulan Data.............................................................. 28
3.4 Pengumpulan Data .............................................................................. 29
3.4.1 Usability Testing .......................................................................... 29
3.4.2 Evaluasi Heuristic ........................................................................ 33
3.5 Analisis Data ......................................................................................... 33
3.6 Hasil Rekomendasi ............................................................................... 34
3.7 Kesimpulan........................................................................................... 34
BAB 4 ANALISIS DAN PENGUMPULAN DATA ........................................................ 35
4.1 Identifikasi Pengguna ........................................................................... 35
4.1.1 Evaluator Usability Testing ......................................................... 35
4.1.2 Evaluator Evaluasi Heuristic ........................................................ 36
4.2 Pelaksanaan Pengujian ........................................................................ 37
4.3 Pengumpulan Data Usability Testing ................................................... 38
4.3.1 Hasil Penilaian Pengguna Usability Testing ................................ 38
4.3.2 Data Temuan Permasalahan Usability Testing ........................... 42
4.4 Pengumpulan Data Permasalahan Evaluasi Heuristic ......................... 46
4.4.1 Hasil Temuan Permasalahan Evaluasi Heuristic .......................... 46
4.4.2 Hasil Wawancara Evaluasi Heuristic............................................ 60
4.5 Analisis Hasil Temuan Permasalahan .................................................. 61
4.5.1 Hasil Temuan Permasalahan Pengujian ...................................... 61
4.5.2 Hasil Temuan Permasalahan Sama Dari Dua Metode Pengujian 72
viii
BAB 5 HASIL DAN PEMBAHASAN .......................................................................... 74
5.1 Analisis Hasil Pengujian Skenario Tugas .............................................. 74
5.1.1 Analisis Efektivitas Situs Web Kabupaten Sidoarjo ..................... 74
5.1.2 Analisis Efisiensi Situs Web Kabupaten Sidoarjo ........................ 75
5.1.3 Analisis Kepuasan Pengguna Situs Web Kabupaten Sidoarjo ..... 76
5.2 Hasil Analisis Permasalahan Usability Testing ..................................... 77
5.3 Hasil Analisis Permasalahan Evaluasi Heuristic ................................... 78
5.4 Pembahasan......................................................................................... 79
5.4.1 Permasalahan Fungsional ........................................................... 79
5.4.2 Permasalahan Tampilan .............................................................. 87
BAB 6 PENUTUP .................................................................................................. 127
6.1 Kesimpulan......................................................................................... 127
6.2 Saran .................................................................................................. 127
DAFTAR PUSTAKA................................................................................................ 129
LAMPIRAN ........................................................................................................... 132
ix
DAFTAR TABEL
x
Tabel 5.16 Hasil temuan masalah tampilan lima .................................................. 95
Tabel 5.17 Hasil temuan masalah tampilan enam ................................................ 96
Tabel 5.18 Hasil temuan masalah tampilan tujuh ................................................ 97
Tabel 5.19 Hasil temuan masalah tampilan delapan ............................................ 98
Tabel 5.20 Hasil temuan masalah tampilan sembilan .......................................... 99
Tabel 5.21 Hasil temuan masalah tampilan sepuluh .......................................... 102
Tabel 5.22 Hasil temuan masalah tampilan sebelas ........................................... 102
Tabel 5.23 Hasil temuan masalah tampilan duabelas ........................................ 103
Tabel 5.24 Hasil temuan masalah tampilan tigabelas ........................................ 106
Tabel 5.25 Hasil temuan masalah tampilan empatbelas .................................... 108
Tabel 5.26 Hasil temuan masalah tampilan limabelas ....................................... 109
Tabel 5.27 Hasil temuan masalah tampilan enambelas ..................................... 110
Tabel 5.28 Hasil temuan masalah tampilan tujuhbelas ...................................... 111
Tabel 5.29 Hasil temuan masalah tampilan delapanbelas ................................. 113
Tabel 5.30 Hasil temuan masalah tampilan sembilanbelas ................................ 116
Tabel 5.31 Hasil temuan masalah tampilan duapuluh ....................................... 118
Tabel 5.32 Hasil temuan masalah tampilan duapuluhsatu................................. 119
Tabel 5.33 Hasil temuan masalah tampilan duapuluhdua ................................. 121
Tabel 5.34 Hasil temuan masalah tampilan duapuluhtiga ................................. 123
Tabel 5.35 Hasil temuan masalah tampilan duapuluhempat ............................. 126
xi
DAFTAR GAMBAR
xii
Gambar 5.15 Gambar permasalahan tampilan tiga.............................................. 93
Gambar 5.16 Gambar solusi perbaikan permasalahan tampilan tiga .................. 93
Gambar 5.17 Gambar permasalahan tampilan empat ......................................... 94
Gambar 5.18 Gambar solusi perbaikan permasalahan tampilan empat .............. 95
Gambar 5.19 Gambar permasalahan tampilan lima............................................. 95
Gambar 5.20 Gambar solusi perbaikan permasalahan tampilan lima ................. 96
Gambar 5.21 Gambar permasalahan tampilan enam .......................................... 96
Gambar 5.22 Gambar solusi perbaikan permasalahan tampilan enam ............... 97
Gambar 5.23 Gambar permasalahan tampilan delapan....................................... 98
Gambar 5.24 Gambar solusi perbaikan permasalahan tampilan delapan ........... 99
Gambar 5.25 Gambar permasalahan tampilan sembilan ..................................... 99
Gambar 5.26 Gambar solusi perbaikan permasalahan tampilan sembilan........ 100
Gambar 5.27 Gambar permasalahan tampilan sepuluh ..................................... 101
Gambar 5.28 Gambar solusi perbaikan permasalahan tampilan sepuluh ......... 102
Gambar 5.29 Gambar permasalahan tampilan sebelas...................................... 102
Gambar 5.30 Gambar solusi perbaikan permasalahan tampilan sebelas .......... 103
Gambar 5.31 Gambar permasalahan tampilan duabelas ................................... 103
Gambar 5.32 Gambar solusi perbaikan permasalahan tampilan duabelas ........ 104
Gambar 5.33 Gambar permasalahan tampilan tigabelas ................................... 105
Gambar 5.34 Gambar solusi perbaikan permasalahan tampilan tigabelas ........ 107
Gambar 5.35 Gambar permasalahan tampilan empatbelas............................... 108
Gambar 5.36 Gambar permasalahan tampilan limabelas .................................. 109
Gambar 5.37 Gambar solusi perbaikan permasalahan tampilan enambelas ..... 110
Gambar 5.38 Gambar solusi perbaikan permasalahan tampilan tujuhbelas ..... 111
Gambar 5.39 Gambar permasalahan tampilan delapanbelas ............................ 112
Gambar 5.40 Gambar permasalahan tampilan delapanbelas ............................ 112
Gambar 5.41 Gambar solusi perbaikan permasalahan tampilan delapanbelas . 114
Gambar 5.42 Gambar solusi perbaikan permasalahan tampilan delapanbelas . 115
Gambar 5.43 Gambar permasalahan tampilan sembilanbelas .......................... 116
Gambar 5.44 Gambar solusi perbaikan permasalahan tampilan sembilanbelas 117
Gambar 5.45 Gambar permasalahan tampilan duapuluh .................................. 117
Gambar 5.46 Gambar solusi perbaikan permasalahan tampilan duapuluh ....... 118
xiii
Gambar 5.47 Gambar permasalahan tampilan duapuluhsatu ........................... 119
Gambar 5.48 Gambar solusi perbaikan permasalahan tampilan duapuluhsatu 120
Gambar 5.49 Gambar permasalahan tampilan duapuluhdua ............................ 121
Gambar 5.50 Gambar solusi perbaikan permasalahan tampilan duapuluhdua . 122
Gambar 5.51 Gambar permasalahan tampilan duapuluhtiga ............................ 123
Gambar 5.52 Gambar solusi perbaikan permasalahan tampilan duapuluhtiga . 125
xiv
DAFTAR LAMPIRAN
1
Keterbukaan akan informasi publik merupakan sebuah hal yang penting bagi
terciptanya Pemerintahan yang baik. Hal tersebut sesuai dengan Undang-undang
No. 14 tahun 2008 tentang keterbukaan informasi publik. Di sisi lain,
Pemerintahan Daerah dapat memanfaatkan hadirnya situs web untuk dijadikan
sebagai sarana melakukan promosi dan memasarkan produk UKM, potensi
sumber daya alam dan manusia, serta karya kerajinan lainnya terhadap
pemasaran yang lebih luas, sehingga hasil dari promosi yang dilakukan itu dapat
mendatangkan investor yang akan berinvestasi di daerah tersebut, sebagai upaya
untuk mendapatkan peningkatan dari pendapatan daerah.
Pada perkembangannya, situs web Kabupaten Sidoarjo memiliki beberapa
kekurangan, dan beberapa faktor lain yang harus lebih diperhatikan untuk
meningkatkan kualitasnya. Berdasarkan hasil pengamatan peneliti pada situs
web Kabupaten Sidoarjo terdapat beberapa permasalahan yang perlu diperbaiki
untuk meningkatkan kualitas usability situs web Kabupaten Sidoarjo, diantaranya
penataan konten yang kurang rapi sehingga terlihat tumpang-tindih dengan
konten lainnya pada bagian pengumuman, tidak adanya informasi penjelasan
gambar media pada tampilan halaman Home situs web, belum adanya foto yang
ditampilkan pada halaman media, penomoran halaman yang kurang menarik
pada bagian halaman berita, pengumuman, dan agenda/kegiatan, serta tidak
dicantumkannya nomor telepon yang dapat dihubungi apabila ada masyarakat
yang ingin menanyakan informasi lebih lanjut.
Berdasarkan beberapa permasalahan yang terdapat pada tampilan
antarmuka dan belum pernah dilakukannya evaluasi terhadap situs web
Kabupaten Sidoarjo, maka perlu dilakukan evaluasi terhadap situs web
Kabupaten Sidoarjo. Salah satunya evaluasi usability yang bertujuan untuk
menemukan permasalahan terkait usability situs web dan memperbaiki hasil
temuan permasalahan tersebut untuk meningkatkan kualitas pengalaman
pengguna.
Pada penelitian ini, peneliti menggunakan metode usability testing untuk
mendapatkan data temuan permasalahan secara langsung dari perspektif
pengguna situs web Kabupaten Sidoarjo dan metode Heuristic Evaluation untuk
menemukan permasalahan dari perspektif evaluator ahli di bidang evaluasi
usability sehingga diharapkan mendapat hasil evaluasi yang lebih lengkap dari
kedua metode tersebut baik penemuan masalah dari sudut pandang pengguna
maupun sudut pandang ahli usability yang masing-masing metode memiliki
kelebihan dan kelamahan dalam menemukan permasalahan. Dengan
menggunakan beberapa ahli usability sebagai evaluator diharapkan dapat
menemukan permasalahan yang mungkin tidak dapat ditemukan oleh pengguna
sistem, begitu pun sebaliknya. Selain itu alasan menggunakan metode Heuristic
Evaluation karena metode ini memiliki tingkat keparahan (severity ratings) yang
digunakan untuk mengidentifikasi masalah dan menentukan prioritas pada
perbaikan masalah tersebut.
2
1.2 Rumusan masalah
Dari apa yang sudah dipaparkan dan dijelaskan secara lebih jauh pada latar
belakang sebelumnya, maka didapatkan beberapa rumusan masalah yang ada
pada kasus studi ini, diantaranya:
1. Bagaimana hasil evaluasi usability pada situs web Kabupaten Sidoarjo?
2. Apa saja permasalahan usability yang ditemukan pada situs web
Kabupaten Sidoarjo menggunakan metode usability testing?
3. Apa saja permasalahan usability yang ditemukan pada situs web
Kabupaten Sidoarjo menggunakan metode heuristic evaluation?
4. Apa saja rekomendasi yang diberikan dari hasil evaluasi untuk perbaikan
situs web Kabupaten Sidoarjo?
1.3 Tujuan
Setelah mengetahui rumusan masalah yang terjadi, peneliti ingin
memeparkan tujuan dibuatnya penelitihan yang dilakukan ini, yaitu :
1. Memperoleh hasil evaluasi usability terhadap situs web Kabupaten
Sidoarjo.
2. Mengidentifikasi masalah usability yang ditemukan pada situs web
Kabupaten Sidoarjo menggunakan usability testing.
3. Mengidentifikasi masalah usability yang ditemukan pada situs web
Kabupaten Sidoarjo menggunakan evaluasi heuristic.
4. Memberikan rekomendasi untuk perbaikan situs web Kabupaten Sidoarjo.
1.4 Manfaat
Diharapkan dengan adanya penilitian ini dapat memberikan manfaat sebagai
berikut:
1. Pemerintah Kabupaten Sidoarjo memperoleh hasil evaluasi terkait
usability terhadap situs web Kabupaten Sidoarjo.
2. Untuk pengembang aplikasi, penelitian ini dapat menjadi pertimbangan
untuk meningkatkan kualitas tampilan situs web Kabupaten Sidoarjo.
3
1.6 Sistematika pembahasan
Sistematika penulisan skripsi ini terdiri dari beberapa bagian utama sebagai
berikut :
BAB I: PENDAHULUAN
Bab ini menjelaskan mengenai latar belakang dipilihnya “Evaluasi Usability
Situs Web Resmi Pemerintah Kabupaten Sidoarjo Menggunakan Metode
Usability Testing dan Evaluasi Heuristic” sebagai judul untuk skripsi ini. Serta
menjelaskan tentang rumusan masalah, tujuan, manfaat, dan batasan
masalah.
BAB II: LANDASAN KEPUSTAKAAN
Bab ini berisi tentang teori-teori yang nantinya akan digunakan dalam
penelitian ini dan membahas keterkaitan terhadap penelitian yang telah
dilakukan sebelumnya.
BAB III: METODOLOGI
Bab ini berisi tentang metodologi yang digunakan serta algoritma yang
digunakan dalam evaluasi, studi literatur, pelaksanaan evaluasi yang terdiri
dari pengujian usability dan evaluasi heuristic, hingga pemberian
rekomendasi, dan bagaimana hasil pengambilan kesimpulan dan saran.
BAB VI: ANALISIS DAN PENGUMPULAN DATA
Bab ini menjelaskan analisis dan proses dalam pengumpulan data untuk
pemenuhan kebutuhan informasi. Analisis dilakukan dengan menguraikan
data yang diterima dari proses pengumpulan data.
BAB V: HASIL DAN PEMBAHASAN
Bab ini membahas dan menyediakan informasi hasil analisis dan rekomendasi
dari hasil evaluasi situs web Kabupaten Sidoarjo menggunakan metode
usability testing dan evaluasi heuristic yang dilakukan oleh peneliti.
BAB IV: PENUTUP
Bab ini berisi kesimpulan yang berkaitan dengan tujuan penelitian dan
informasi yang didapat pada penelitian ini, kemudian memberikan saran
untuk penelitian yang akan dilakukan selanjutnya agar dapat memperbaiki
kekurangan pada penelitian ini.
4
BAB 2 LANDASAN KEPUSTAKAAN
5
Misi merupakan tahapan yang harus dilaksanakan untuk mencapai visi yang
telah ditetapkan. Misi juga berapa output output yang pernah diciptakan
terlebih dahulu untuk mewujudkan visi. Misi pada dasarnya merupakan beban
yang akan dikerjakan dan diselesaikan agar visi dapat terwujud.
Untuk mewujudkan visi Bupati dan Wakil Bupati sebagaimana rumusan
sebelumnya, maka dirumuskan misi (beban kinerja yang harus dilaksanakan)
sebagai berikut :
Pemerintah yang bersih dan akuntabel melalui penyelenggaraan
pemerintah yang inovatif, aspiratif, partisipatif dan transparan.
Meningkatnya Perekonomian Daerah melalui optimalisasi potensi Basis
Industri Pengolahan, Pertanian, Perikanan, Pariwisata, UMKM dan
Koperasi serta Pemberdayaan Masyarakat.
Meingkatnya kualitas dan Standar Pelayanan Pendidikan dan Kesehatan;
Meningkatnya tatanan Kehidupan Masyarakat yang berbudaya dan
berakhlakul Karimah kepada Tuhan Yang Maha Esa, serta dapat
memelihara kerukunan, ketentraman dan Ketertiban.
Infrastruktur Publik yang memadai dan berkualitas sebagai penunjang
pertumbuhan ekonomi dengan memperhatikan kelestarian lingkungan.
Pada gambar 2.1 ditunjukkan visi dan misi Kabupaten Sidoarjo.
6
Struktur organisasi merupakan susunan komponen unit kerja yang terdapat
dalam organisasi. Struktur organisasi menunjukan adanya pembagian tugas dan
tanggung jawab, dan bagaimana fungsi-fungsi / kegiatan-kegiatan yang berbeda-
beda tersebut diintegrasikan (koordinasi). Selain itu struktur organisasi juga
menunjukkan spesialisasi pekerjaan, saluran perintah dan penyampaian laporan.
Berdasarkan Peraturan Daerah Kabupaten Sidoarjo Nomor 11 Tahun 2016
susunan Perangkat Daerah, meliputi:
a. Bupati dan Wabil Bupati.
b. Sekretariat Daerah.
c. Sekretariat DPRD.
d. Inspektorat.
e. Dinas.
f. Badan.
g. Kecamatan.
Untuk lebih jelasnya, pada gambar 2.2 dijelaskan bagan susunan perangkat
daerah Kabupaten Sidoarjo.
7
web Kabupaten Sidoarjo. Gambar 2.3 merupakan tampilan halaman Home pada
situs web Kabupaten Sidoarjo.
8
Gambar 2.4 Tampilan halaman Tentang Sidoarjo situs web Kabupaten Sidoarjo
Sumber: Situs web Kabupaten Sidoarjo (2019)
9
Halaman Fasilitas Kantor Pelayanan Publik Situs Web Kabupaten
Sidoarjo
Halaman fasilitas kantor pelayanan publik berisi informasi daftar alamat,
nomor telepon, dan situs web instansi pelayanan publik di Kabupaten Sidoarjo.
Informasi yang ditampilkan seperti data alamat Kantor bupati, Gedung DPRD,
dan Polresta Sidoarjo. Gambar 2.5 merupakan tampilan halaman fasilitas kantor
pelayanan publik pada situs web Kabupaten Sidoarjo.
Gambar 2.5 Tampilan halaman Fasilitas kantor pelayanan publik situs web
Kabupaten Sidoarjo
Sumber: Situs web Kabupaten Sidoarjo (2019)
10
Halaman Layanan Kesehatan Situs Web Kabupaten Sidoarjo
Halaman Layanan Kesehatan adalah halaman yang menampilkan informasi
layanan kesehatan yang disediakan oleh pemerintah Kabupaten Sidoarjo untuk
meningkatkan kesehatan masyarakat dan untuk memberikan bantuan
pertolongan secara medis. Gambar 2.6 merupakan tampilan halaman layanan
kesehatan pada situs web Kabupaten Sidoarjo.
11
Kabupaten Sidoarjo untuk penggunaan anggaran selama 1 tahun. Selain itu
masyarakat juga dapat memantau kinerja Pemerintah Kabupaten Sidoarjo dalam
menggunakan biaya APBD. Gambar 2.7 merupakan tampilan halaman laporan
kinerja pada situs web Kabupaten Sidoarjo.
Gambar 2.7 Tampilan halaman laporan kinerja situs web Kabupaten Sidoarjo
Sumber: Situs web Kabupaten Sidoarjo (2019)
Halaman Pengumuman Situs Web Kabupaten Sidoarjo
Halaman Pengumuman adalah bentuk layanan pemerintah Kabupaten
Sidoarjo untuk menyampaikan informasi publik kepada masyarakat.
Pengumuman yang ditampilkan seperti hasil seleksi penerimaan pegawai.
Gambar 2.8 di bawah ini merupakan tampilan halaman pengumuman pada situs
web Kabupaten Sidoarjo.
12
Gambar 2.8 Tampilan halaman Pengumuman situs web Kabupaten Sidoarjo
Sumber: Situs web Kabupaten Sidoarjo (2019)
Halaman Kontak Situs Web Kabupaten Sidoarjo
Halaman kontak berfungsi untuk menerima komentar, saran, dan pertanyaan
dari masyarakat terkait situs web Kabupaten Sidoarjo. Gambar 2.9 di bawah ini
merupakan tampilan halaman kontak pada situs web Kabupaten Sidoarjo.
13
Gambar 2.9 Tampilan halaman Kontak situs web Kabupaten Sidoarjo
Sumber: Situs web Kabupaten Sidoarjo (2019)
Situs web Kabupaten Sidoarjo merupakan situs web yang digunakan
Pemerintah Kabupaten Sidoarjo untuk memenuhi kebutuhan informasi
masyarakat, memberikan layanan edukasi, memberitakan kejadian atau agenda
yang diselenggarakan oleh Pemerintah Kabupaten Sidoarjo, dan memberi
informasi terkait hasil laporan kerja Pemerintah Kabupaten Sidoarjo. Dalam hal
ini situs web Pemerintah Kabupaten Sidoarjo dikelola oleh Dinas Komunikasi dan
Informatika Kabupaten Sidoarjo dengat alamat situs http://sidoarjokab.go.id. Di
dalamnya berisi tentang profil Kabupaten Sidoarjo, profil masyarakat, prestasi
yang telah di raih Kabupaten Sidoarjo, fasilitas yang tersedia sebagai sarana
prasana masyarakat, layanan pemerintahan kepada masyarakat, pengumuman
berita dan agenda kota, serta informasi lainnya tentang pemerintahan di wilayah
Kabupaten Sidoarjo.
14
2.3 Situs Web
Website adalah sebuah kumpulan halaman web yang saling berhubungan dan
dapat diakses melalui tampilan halaman depan (Home page) menggunakan
sebuah browser. Menurut Yuhefizar (2013) website adalah Keseluruhan halaman
web yang terdapat pada sebuah domain yang mengandung informasi. Sebuah
website biasanya dibangun atas banyak halaman web yang saling berhubungan.
Hubungan antara satu halaman web dengan halaman web yang lainnya disebut
dengan Hyperlink, sedangkan teks yang dijadikan media penghubung disebut
dengan Hypertext.
2.4 Evaluasi
Menurut Kamus Besar Bahasa Indonesia evaluasi adalah pengumpulan dan
pengamatan data dari berbagai macam objek alat bukti atau kegiatan untuk
mengukur dampak dan efektivitas dari suatu objek, program, atau proses yang
berkaitan dengan spesifikasi dan kebutuhan pengguna yang telah ditetapkan
sebelumnya. Sedangkan menurut Sudijono (1996) mengemukakan bahwa
pengertian evaluasi adalah interpretasi atau penafsiran yang bersumber pada
data kuantitatif, sedangkan data kuantitatif merupakan hasil dari pengukuran.
2.5 Usability
Menurut International Standards Organizations ISO 9241-11:2018 usability
adalah sejauh mana suatu sistem, produk, atau layanan dapat digunakan oleh
pengguna untuk mencapai tujuan tertentu dengan efektivitas, efisiensi dan
15
kepuasan pengguna dalam situasi tertentu. Ketiga aspek tersebut memiliki
definisi sebagai berikut:
Efektivitas adalah tingkat kesesuaian dan kelengkapan sistem yang
dirasakan pengguna dalam mencapai tujuan tertentu.
Efisiensi adalah penggunaan sumber daya yang diperlukan sehubungan
dengan tujuan yang ingin dicapai.
Kepuasan adalah sejauh mana tanggapan pengguna setelah
menggunakan sistem, produk, atau layanan untuk memenuhi kebutuhan
dan harapan pengguna.
Menurut Nielsen (2012) Usability didefinisikan oleh 5 komponen kualitas:
Learnability: Seberapa mudah pengguna menggunakan sistem untuk
menyelesaikan pekerjaan pada saat pertama kali menjalankan sistem
tersebut.
Efficiency: Setelah menggunakan sistem, seberapa cepat waktu yang
dibutuhkan pengguna untuk dapat mengerjakan pekerjaan tersebut.
Memorability: Ketika pengguna tidak menggunakan sistem tersebut
dalam jangka waktu yang lama, seberapa mudah mereka menggunakan
kembali sistem tersebut.
Errors: Seberapa besar tingkat kesalahan yang terjadi ketika pengguna
menggunakan sistem, dan seberapa mudah pengguna menemukan solusi
dari masalah tersebut.
Satisfaction: Tingkatan kepuasan dan kenyamanan pengguna yang diukur
setelah pengguna menggunakan sistem.
Selain komponen usability diatas, terdapat beberapa atribut kualitas penting
lainnya. Salah satunya adalah utility, yang mengacu pada fungsionalitas desain
yang berkaitan dengan apakah sesuatu tersebut merupakan barang atau jasa
yang dibutuhkan pengguna. Usability dan utility merupakan komponen penting
dalam menentukan seberapa besar tingkat usability suatu produk atau jasa.
Berikut ini merupakan pengertian utility dan usability menurut Nielsen (2012).
Definisi dari utility adalah apakah produk menyediakan fitur yang Anda
butuhkan.
Definisi usability adalah seberapa mudah & menyenangkan fitur ini untuk
digunakan.
Useful adalah gabungan dari komponen usability dan utility.
Usability adalah komponen penting yang harus diperhatikan ketika
membangun sebuah situs web. Jika situs web sulit digunakan, maka minat
pengguna untuk menjalankan situs tersebut akan berkurang. Jika situs web tidak
dapat membantu pengguna dalam menyelesaikan pekerjaannya atau tidak dapat
memberikan informasi yang relevan terhadap kebutuhan pengguna, maka situs
web tersebut akan jarang diakses.
16
2.6 Usability Testing
Usability testing merupakan salah satu cara untuk mengetahui seberapa
mudah pengguna menggunakan aplikasi atau sistem, seberapa efisien dan efektif
sebuah aplikasi yang dijalankan dapat membantu pengguna mencapai tujuannya
dan apakah pengguna puas dengan aplikasi atau sistem yang digunakan.
Kelebihan menggunakan metode usability testing adalah dapat menemukan
permasalahan usability dari hasil pengamatan interaksi pengguna dengan sistem.
Usability testing memungkinkan peneliti mengidentifikasi masalah sebelum
sistem tersebut dipublikasikan. Masalah yang ditemukan diidentifikasi dan
diperbaiki sebelum sistem tersebut diluncurkan. Manfaat usability testing
diantaranya:
Mengetahui apakah peserta pengujian berhasil menyelesaikan skenario
tugas yang diberikan.
Mengidentifikasi berapa lama waktu yang digunakan untuk
menyelesaikan tugas yang diberikan.
Mengetahui seberapa puas peserta menggunakan situs web atau produk
lainnya.
Menganalisis kinerja untuk mengetahui apakah itu memenuhi tujuan
kegunaan Anda.
18
Bantuan dan dokumentasi yaitu sistem dapat memberikan bantuan dan
dokumentasi panduan yang dapat membantu pengguna ketika
menjalankan sistem. Setiap informasi tersebut harus mudah dicari dan
difokuskan untuk membantu pengguna menyelesaikan pekerjaannya.
Kelebihan evaluasi heuristic:
Dapat memberikan umpan balik yang cepat dengan biaya rendah.
Dapat memperoleh umpan balik pada awal proses pengembangan sistem.
Dapat membantu menyarankan langkah yang tepat untuk pengembang.
Dapat digunakan bersama dengan metode lainnya.
Dapat melakukan pengujian kegunaan untuk memeriksa lebih lanjut
potensi masalah.
Kekurangan evaluasi heuristic:
Dibutuhkan pengetahuan dan pengalaman evaluator untuk
mengimplementasikan teknik heuristic secara efektif.
Pakar usability terkadang sulit ditemukan dan memerlukan biaya mahal.
19
dengan prinsip-prinsip desain interaksi yang telah ditentukan (heuristic).
Evaluator bertanggung jawab untuk menganalisis antarmuka pengguna dalam
sesi evaluasi heuristic. Evaluator harus menganalisis antarmuka setidaknya dua
kali. Analisis pertama akan dimaksudkan untuk merasakan aliran interaksi dan
ruang lingkup sistem. Analisis kedua untuk memungkinkan evaluator fokus pada
elemen antarmuka tertentu (Nielsen, 1994a).
Output dari menggunakan metode evaluasi heuristic adalah daftar masalah
usability pada antarmuka sistem yang tidak sesuai dengan prinsip-prinsip
heuristic pada setiap permasalahan menurut pendapat evaluator. Hasil evaluasi
dapat didokumentasikan sebagai laporan tertulis yang didapatkan dari komentar
evaluator terkait hasil temuan masalah pada antarmuka sistem.
Salah satu kemungkinan untuk mengembangkan metode evaluasi heuristic
untuk memberikan beberapa saran desain adalah melakukan sesi wawancara
tanya jawab setelah sesi evaluasi terakhir.
20
2.9 Evaluator
Evaluator adalah individu atau kelompok yang bertugas memberikan
penilaian terhadap kualitas, ketercapaian tujuan, atau nilai sesuatu dari proses
evaluasi yang dilakukan. Pada gambar 2.10, Macefield (2009) berpendapat
bahwa untuk sebagian besar studi yang terkait dengan penemuan masalah
usability memiliki jumlah kelompok yang terdiri dari 3-20 peserta valid, dengan
5-10 peserta sebagai rentang dasar jumlah peserta yang direkomendasikan, dan
jumlah kelompok harus ditingkatkan seiring dengan kompleksitas studi dan
kekritisan konteks yang diuji.
21
melakukan pengujian menggunakan empat evaluator, maka permasalahan yang
ditemukan akan memiliki persamaan dengan evaluator lainnya pada beberapa
bagian. Setiap evaluator memiliki temuan permasalahan yang berbeda dengan
permasalahan yang ditemukan oleh evaluator lain. Ketika jumlah evaluator lebih
dari lima, maka keefektifan penemuan permasalahan semakin rendah karena
akan ditemukan permasalahan yang sama dengan evaluator yang lainnya tanpa
ada penemuan permasalahan baru.
2.11 Kuesioner
Kuesioner merupakan daftar pertanyaan yang akan digunakan oleh peneliti
untuk memperoleh data dari sumbernya secara langsung melalui proses
komunikasi atau dengan mengajukan pertanyaan. Menurut Churchill (2005),
dalam merancang kuesioner berikut merupakan langkah-langkah yang harus
dilakukan oleh peneliti:
22
1. Menetapkan tujuan informasi yang ingin didapatkan.
2. Menentukan jenis kuesioner dan metode yang digunakan..
3. Menentukan masing-masing isi dari pertanyaan.
4. Menentukan jumlah respon dari setiap pertanyaan.
5. Menentukan penyusunan kata-kata yang digunakan untuk setiap
pertanyaan.
6. Menentukan urutan pertanyaan.
7. Menentukan jenis karakteristik fisik kuesioner.
8. Menguji kembali langkah 1 sampai 7 dan melakukan perubahan jika perlu.
9. Melakukan uji awal atas kuesioner dan lakukan perubahan jika perlu.
23
jawab tersebut akan menghasilkan skor yang mewakili tingkat kepuasan
pengguna. Kuesioner SUS memiliki tahapan dalam upaya untuk menghitung skor
kuesioner SUS (Brooke, 2013):
1. Setiap nomor pernyataan memiliki kontribusi nilai dari 0 sampai 4.
2. Untuk nomor ganjil, penilaian skor adalah posisi skala dikurangi 1.
3. Untuk nomor genap, penilaian skor adalah 5 dikurangi posisi skala.
4. Kemudian, keseluruhan jumlah skor yang didapat dari perhitungan
dikalikan dengan 2,5 untuk mendapatkan skor kuesioner SUS akhir.
5. Skor kuesioner SUS memiliki rentang nilai antara 0 sampai 100.
Skor akhir kuesioner SUS yang didapat akan merepresentasikan tingkat
usability yang dimiliki sebuah produk. Berikut merupakan nilai skor Kuesioner
SUS pada gambar 2.12.
2.13 Wawancara
Wawancara adalah kegiatan tatap muka antara pewawancara dan responden
yang dimaksudkan untuk menggali informasi yang diharapkan, dan bertujuan
mendapatkan data dari responden untuk mengurangi bias dan meningkatkan
efisiensi (Singh, 2002).
Menurut Singh (2002) terdapat dua jenis wawancara, yaitu wawancara
formal dan informal. Wawancara formal adalah sebuah prosedur tanya jawab
yang sistematis untuk menggali informasi dari responden dengan kondisi dimana
satu set pertanyaan ditanyakan dengan urutan yang telah dipersiapkan oleh
pewawancara dan jawabannya direkam dalam bentuk yang terstandardisasi.
Sedangkan wawancara informal adalah sebuah wawancara dimana tidak
dipersiapkan terlebih dahulu pertanyaan-pertanyaan, tidak ada persiapan urutan
pertanyaan, dan pewawancara yang berkuasa penuh untuk menentukan
pertanyaan sesuai dengan poin-poin utama.
24
2.14 Observasi
Observasi digunakan sebagai metode pengamatan dan pencatatan kegiatan
penguji secara sistematis melalui layar komputer yang digunakan penguji. Morris
(1973) mengartikan observasi sebagai kegiatan mencatat suatu gejala dengan
bantuan instrumen-instrumen dan merekamnya dengan tujuan ilmiah atau
tujuan lain. Dalam melakukan observasi hendaknya penguji memperhatikan
beberapa hal berikut :
Memliki pengetahuan yang cukup terhadap obyek yang hendak diteliti.
Pemahaman tujuan umum dan tujuan khusus penelitian yang
dilaksanakannya.
Penentuan cara dan alat yang dipergunakan dalam mencatat data.
Penentuan kategori pendapatan gejala yang diamati.
Pengamatan dan pencatatan harus dilaksanakan secara cermat dan kritis.
Pencatatan setiap gejala harus dilaksanakan secara terpisah agar tidak
saling mempengaruhi.
Pemilikan pengetahuan dan keterampilan terhadap alat dan cara
mencatat hasil observasi.
Menurut Margono (2007) pada dasarnya teknik observasi digunakan untuk
melihat dan mengamati perubahan fenomena–fenomena sosial yang tumbuh
dan berkembang yang kemudian dapat dilakukan perubahan atas penilaian
tersebut.
26
BAB 3 METODOLOGI
28
sesuai dengan yang diharapkan, maka pertanyaan yang diajukan harus relevan
dengan tujuan penelitian. Persiapan pengumpulan data dilakukan dengan
merancang skenario tugas untuk pengujian dan menyusun pertanyaan yang akan
diajukan kepada evaluator baik dengan menyebarkan kuesioner SUS maupun
melakukan wawancara secara langsung.
Sebelum merancang skenario tugas, peneliti melakukan analisis untuk
mengetahui tujuan dan latar belakang pengguna mengunjungi situs web
Kabupaten Sidoarjo. Analisis dilakukan dengan melakukan wawancara kepada 6
masyarakat Kabupaten Sidoarjo yang pernah menggunakan situs web Kabupaten
Sidoarjo dan dianggap representatif terhadap pengguna lainnya dengan
pertanyaan sebagai berikut :
1. Apa alasan anda mengakses situs web Kabupaten Sidoarjo
2. Fitur atau menu informasi apa saja yang sering anda buka ketika
mengakses situs web Kabupaten Sidoarjo
3. Apa harapan anda untuk situs web Kabupaten Sidoarjo kedepannya?
Dalam hal ini, peneliti menemukan beberapa tujuan pengguna yang diperoleh
dari hasil wawancara tersebut. Dengan adanya proses analisis ini diharapkan
pengujian terhadap evaluator dapat merepresentasikan perilaku pengguna situs
web yang sesungguhnya sehingga menghasilkan data penelitian yang valid. Hasil
wawancara dapat dilihat pada LAMPIRAN A.
29
digunakan evaluator dalam mengerjakan tugasnya dan mencatat bagaimana
perilaku pengguna ketika menggunakan sistem. Pencatatan ini bertujuan untuk
mengukur tingkat efektifitas dan efisiensi sistem, serta seberapa mudah
pengguna dalam menggunakan sistem. Kemudian hasil dari pengujian akan
dimasukan kedalam tabel penilaian sesuai instrumen pengujian. Selama
pengujian, peneliti akan mendampingi evaluator tanpa memberikan arahan atau
petunjuk lain untuk mengerjakan skenario tugas.
3.4.1.1 Skenario Tugas
Dari hasil analisis wawancara tujuan pengguna mengakses situs web
Kabupaten Sidoarjo, dihasilkan 10 skenario tugas yang dijadikan acuan untuk
menilai keberhasilan evaluator dalam pengujian usability testing. Skenario tugas
yang harus dilakukan oleh evaluator pengujian secara garis besar ditampilkan
pada Tabel 3.1.
Tabel 3.1 Skenario tugas usability testing
No Skenario Tugas Keterangan
1 Mengakses situs web aplikasi Evaluator diminta mengakses situs
LAPOR (Layanan Aspirasi dan web aplikasi LAPOR (Layanan Aspirasi
Pengaduan Online Rakyat) dan Pengaduan Online Rakyat) yang
melalui situs web Kabupaten diakses melalui situs web Kabupaten
Sidoarjo. Sidoarjo dengan tujuan agar dapat
menyampaikan laporan keluhan
kepada pemerintah.
2 Mencari kontak nomor telepon Evaluator diminta mencari kontak
Polresta Sidoarjo. nomor telepon Polresta Sidoarjo pada
situs web Kabupaten Sidoarjo.
Polresta Sidoarjo merupakan bagian
dari instansi pelayanan publik.
3 Mencari alamat kantor dinas Evaluator diminta mencari informasi
Kominfo Kabupaten Sidoarjo. alamat kantor Dinas Kominfo (Dinas
Komunikasi dan Informatika)
Kabupaten Sidoarjo.
4 Mencari informasi laporan Evaluator diminta mencari laporan
pendapatan daerah Kabupaten pendapatan daerah Kabupaten
Sidoarjo. Sidoarjo. Laporan Pendapat
merupakan bagian dari informasi
transparansi keuangan.
5 Mengunduh formulir Evaluator diminta mengunduh salah
pengumuman penerimaan satu formulir pengumuman
pegawai Non-ASN. penerimaan pegawai Non-ASN.
6 Mencari berita terbaru pada Evaluator diminta mencari informasi
situs web Kabupaten Sidoarjo. berita terbaru yang diunggah pada
situs web Kabupaten Sidoarjo.
30
Tabel 3.1 Skenario tugas usability testing (lanjutan)
No Skenario Tugas Keterangan
7 Mencari informasi agenda yang
Evaluator diminta mencari informasi
sedang dilaksanakan atau baru
agenda terbaru yang diselenggarakan
saja terlaksana. oleh pemerintah Kabupaten Sidoarjo.
8 Mencari informasi prestasi yang
Evaluator diminta mencari informasi
telah diraih oleh Kabupaten prestasi yang telah diraih oleh
Sidoarjo pada tahun 2018. Kabupaten Sidoarjo pada tahun 2018.
9 Membuka channel YouTube Evaluator diminta mengakses channel
Pemerintah Kabupaten Sidoarjo.
YouTube Pemerintah Kabupaten
Sidoarjo melalui situs web Kabupaten
Sidoarjo. Evaluator dapat mengklik
ikon YouTube pada situs web untuk
dapat membuka channel YouTube
Kabupaten Sidoarjo.
10 Membuka halaman download Evaluator diminta membuka halaman
aplikasi M-BonK (merujuk ke download aplikasi M-Bonk yang
halaman Play Store). dikembangkan oleh Dinas PUPR
Sidoarjo dan memiliki fitur Sidoarjo
Peduli Jalan untuk membuat laporan
kondisi jalan yang rusak.
3.4.1.2 Wawancara
Setelah evaluator menyelesaikan skenario tugas, peneliti melakukan
wawancara dengan mengajukan beberapa pertanyaan kepada evaluator untuk
mengetahui permasalahan apa saja yang dialami evaluator selama melakukan
pengujian. Data yang diharapkan dari hasil wawancara adalah data kualitatif
mengenai apa saja keluhan dari permasalahan yang dialami ketika evaluator
melakukan pengujian skenario tugas dan meminta rekomendasi saran perbaikan
untuk pengembangan situs web selanjutnya. Berikut merupakan pertanyaan
yang diajukan kepada evaluator usability testing.
1. Kesulitan apa saja yang anda alami selama melakukan
evaluasi/pengujian?
2. Bagaimana pendapat anda mengenai tampilan situs web Kabupaten
Sidoarjo? Apakah cukup membantu anda dalam memperoleh informasi
yang anda harapkan?
3. Apa saran anda terhadap situs web Kabupaten Sidoarjo agar dapat
memperbaiki kualitasnya?
4. Apakah anda berniat untuk mengakses kembali situs web Kabupaten
Sidoarjo sebagai referensi dalam mencari informasi?
31
3.4.1.3 Kuesioner SUS
Setelah melakukan wawancara, evaluator diminta mengisi kuesioner SUS
(System Usability Scale) untuk mengetahui tingkat kepuasan pengguna setelah
menggunakan situs web Kabupaten Sidoarjo. Pada kuesioner SUS terdapat 10
pernyataan yang masing-masing memiliki 5 pilihan jawaban mulai dari sangat
setuju hingga sangat tidak setuju. Dalam kuesioner SUS terdapat pernyataan
negatif pada angka genap yang dihitung dengan mengurangi nilai 5 dengan
bobot tiap pernyataan (5-x), sedangkan pernyataan positif pada angka ganjil
akan dihitung dengan cara bobot tiap pertanyaan dikurangi 1 (x – 1). Jumlah total
skor didapatkan dengan cara menjumlahkan seluruh skor tiap pernyataan.
Setelah itu mengalikan total skor yang telah didapat dengan 2,5.
Gambar 3.2 merupakan kuesioner SUS yang akan diberikan kepada evaluator,
sedangkan hasil pengisian kuesioner SUS oleh evaluator dapat dilihat pada
LAMPIRAN D.
32
Gambar 3.2 Kuesioner SUS
Sumber: Diadaptasi dari Sharfina dan Santoso (2016)
33
menghasilkan data kualitatif berupa perilaku pengguna ketika menggunakan
sistem.
Berikut merupakan alur pelaksanaan evaluasi heuristic:
1. Memperkenalkan diri terhadap evaluator dan menjelaskan apa maksud
dan tujuan kita menemuinya.
2. Memberikan berkas evaluasi terhadap evaluator.
3. Meminta evaluator untuk mengisi lembar persetujuan bahwa yang
bersangkutan menyetujui sebagai evaluator.
4. Memberikan penjelasan kepada evaluator tentang prosedur evaluasi
heuristic.
5. Evaluator melakukan evaluasi pada antarmuka sistem.
6. Evaluator mengisi lembar penilaian yang telah disediakan serta
memberikan komentar terkait sistem yang dievaluasi.
7. Evaluator mengembalikan berkas penilaian yang telah dinilai sebelumnya.
8. Peneliti membuat laporan dari data hasil evaluasi yang didapatkan dari
evaluator.
Sebelum melakukan pengujian, peneliti akan memberikan lembar panduan
dan instruksi bagaimana cara melakukan evaluasi heuristic kepada evaluator.
Evaluator akan bertugas mengobservasi sistem dan mencari permasalahan
desain interaksi yang tidak sesuai dengan prinsip heuristic. Kemudian
memberikan penilaian severity rating pada permasalahan yang ditemukan.
Diakhir pengujian heuristic, peneliti akan melakukan wawancara kepada
evaluator dengan pertanyaan sebagai berikut :
1. Bagaimana komentar anda terhadap permasalahan yang anda temukan
setelah menggunakan sistem ini?
2. Bagaimana pendapat anda mengenai tampilan situs web Kabupaten
Sidoarjo? Apakah cukup membantu anda dalam memperoleh informasi
yang anda harapkan?
3. Apakah anda berniat untuk mengakses kembali situs web Kabupaten
Sidoarjo sebagai referensi dalam mencari informasi?
34
Selanjutnya hasil temuan permasalahan dari masing-masing evaluator baik
temuan menggunakan metode usability testing maupun evaluasi heuristic
dikonsolidasikan untuk mengurangi redundansi permasalahan yang sama.
Setelah dianalisis, hasil temuan permasalahan kemudian dikelompokan
berdasarkan jenis permasalahannya dan diurutkan sesuai tingkat severity ratings.
Pengelompokan data ini juga terkait dengan pemberian solusi terhadap masalah
yang ditemukan dan untuk memberikan masukan kepada pengembang agar
segera memperbaiki permasalahan pada situs web Kabupaten Sidoarjo sesuai
dengan tingkat severity rating permasalahan tersebut.
3.7 Kesimpulan
Pada akhir proses penelitian pasti terdapat kesimpulan berdasarkan hasil
penelitian yang telah dilakukan. Kesimpulan dapat berupa jawaban dari
permasalahan yang melatarbelakangi penelitian tersebut. Pada penelitian ini
kesimpulan yang dihasilkan akan berkaitan tentang hasil seberapa banyak
permasalahan yang ditemukan dan tingkatan usability situs web Kabupaten
Sidoarjo.
35
BAB 4 ANALISIS DAN PENGUMPULAN DATA
Bab ini membahas analisis data dan menjelaskan tentang data-data yang
didapatkan dari hasil penelitian yang telah dilakukan terhadap situs web
Kabupaten Sidoarjo.
36
Tabel 4.1 Biodata evaluator usability testing
37
Pemilihan evaluator pada penelitian ini didasarkan pada kriteria latar
belakang pendidikan dan pengalaman yang dimiliki. Latar belakang pendidikan
evaluator minimal harus bergelar sarjana komputer atau sarjana lain yang masih
berkaitan dengan bidang komputer dan memiliki pengalaman terlibat dalam
pengembangan situs web, smartcity, atau pada penelitian usability sebelumnya.
Tabel 4.2 menampilkan informasi singkat data diri evaluator yang terlibat dalam
penelitian ini.
Tabel 4.2 Biodata evaluator evaluasi heuristic
No Nama Umur Pekerjaan Pendidikan Pengalaman
Almira Syawli, Menjadi evaluator dalam
Magister
1. S. Kom, M. 27 Dosen penelitian usability
Komputer
Kom sebelumnya.
Ratih Kartika Menjadi evaluator dalam
Magister
2. Dewi, S.T., M. 29 Dosen penelitian usability
Komputer
Kom sebelumnya.
Melakukan penelitian
usability berjudul
“Evaluasi Usability Pada
M. Arroofi
Software Sarjana Website E-commerce XYZ
3. Arga Kusuma, 21
Developer Komputer Menggunakan Metode
S. Kom
Cognitive Walkthrough
dan System Usability
Scale (SUS)”.
Melakukan penelitian
usability berjudul
“Evaluasi Usability Pada
Venzy Pertiwi, Software Sarjana
4. 21 Aplikasi KRL Access
S. Kom Developer Komputer
Dengan Menggunakan
Metode Evaluasi
Heuristik”.
38
4.3 Pengumpulan Data Usability Testing
Pengumpulan data usability testing dilakukan dengan memberikan task
scenario yang harus diselesaikan oleh setiap evaluator dengan menjalankan situs
web Kabupaten Sidoarjo dan didampingi oleh penguji tanpa memberikan arahan
atau petunjuk untuk mengerjakannya. Kemudian data hasil dari pengujian
tersebut akan dimasukan kedalam tabel penilaian sesuai instrumen pengujian.
Setelah evaluator menyelesaikan skenario tugas yang diberikan, peneliti
melakukan wawancara dengan memberikan pertanyaan terkait penilaian
pengguna terhadap kualitas usability situs web Kabupaten Sidoarjo. Wawancara
dilakukan untuk mengetahui keluhan dari permasalahan yang dialami oleh
pengguna ketika menggunakan sistem. Pengguna juga diminta memberikan
saran serta nilai tingkat keparahan dari permasalahan yang disampaikan. Di akhir
pengujian, peneliti memberikan kuesioner SUS untuk mengetahui tingkat
kepuasan pengguna setelah menggunakan situs web Kabupaten Sidoarjo.
39
Tabel 4.3 Keberhasilan evaluator situs web Kabupaten Sidoarjo
Keberhasilan evaluator per skenario tugas
Evaluator
T1 T2 T3 T4 T5 T6 T7 T8 T9 T10
E1 1 1 1 1 1 1 1 1 1 1
E2 1 1 1 1 1 1 1 1 1 1
E3 1 1 1 1 1 1 1 1 1 1
E4 1 1 1 1 1 1 1 1 1 1
E5 1 1 1 1 1 1 1 1 1 1
E6 1 1 1 1 1 1 1 1 1 1
E7 1 1 1 1 1 1 1 1 1 1
E8 1 1 1 1 1 1 1 1 1 1
E9 1 1 1 1 1 1 1 1 1 1
E10 1 1 1 1 1 1 1 1 1 1
Keberhasilan 1 1 1 1 1 1 1 1 1 1
tugas
Rata-rata 100%
keberhasilan
Dari hasil pengujian yang telah dilakukan terhadap 10 evaluator situs web
Kabupaten Sidoarjo, menunjukan bahwa seluruh evaluator dapat menyelesaikan
skenario tugas yang diberikan. Pada Tabel 4.3 menampilkan data completion rate
pengguna terhadap situs web Kabupaten Sidoarjo dalam menjalankan skenario
tugas sebesar 100% dari rentang 100%.
2. Efficiency
Efficiency digunakan untuk mengukur kemampuan pengguna dalam
menjalankan sistem dengan baik dan tepat. Terdapat dua aspek pada penilaian
efisiensi situs web Kabupaten Sidoarjo yaitu waktu yang dibutuhkan evaluator
untuk menyelesaikan tugas dan jumlah klik yang dilakukan evaluator dalam
menyelesaikan tugas. Tabel 4.4 menunjukkan waktu yang digunakan evaluator
untuk menyelesaikan setiap tugas yang diberikan. Satuan waktu yang digunakan
adalah detik.
40
Tabel 4.4 Waktu penyelesaian skenario tugas situs web Kabupaten Sidoarjo
Waktu penyelesaian per skenario tugas
Evaluator
T1 T2 T3 T4 T5 T6 T7 T8 T9 T10
E1 108 118 134 53 16 8 5 13 108 46
E2 22 169 17 13 18 8 3 17 42 12
E3 21 49 76 14 19 34 3 13 32 16
E4 62 55 9 14 23 6 24 3 178 5
E5 50 103 42 63 34 7 9 18 45 35
E6 32 104 32 22 9 16 27 27 4 48
E7 11 29 11 11 10 6 5 10 19 3
E8 191 79 49 59 27 30 24 43 258 33
E9 184 41 64 79 22 40 19 6 108 32
E10 12 93 18 16 5 5 3 8 4 12
Jumlah
69,3 84 45,2 34,4 18,3 16 12,2 15,8 79,8 24,2
rata-rata
Total rata-
39,9
rata
Dari hasil yang ditunjukkan pada Tabel 4.4 tercatat waktu terlama untuk
menyelesaikan tugas yaitu pada tugas 9 yang dilakukan oleh evaluator 8 dengan
jumlah waktu penyelesaian 258 detik, ini terjadi karena evaluator merasa
kesulitan dan kebingungan dalam menemukan ikon aplikasi YouTube yang
berwarna putih kecil pada bagian atas kiri halaman Home situs web Kabupaten
Sidoarjo. Total rata-rata waktu evaluator untuk menyelesaikan skenario tugas
adalah sebesar 39,9 detik atau 40 detik jika dibulatkan.
Pada Tabel 4.5 berisi jumlah klik yang dilakukan evaluator untuk
menyelesaikan setiap skenario tugas yang diberikan.
41
Tabel 4.5 Jumlah klik evaluator situs web Kabupaten Sidoarjo
Jumlah klik per skenario tugas
Evaluator
T1 T2 T3 T4 T5 T6 T7 T8 T9 T10
E1 19 13 14 5 5 3 3 4 18 7
E2 8 14 3 3 5 3 3 6 8 1
E3 6 7 8 4 5 6 3 5 4 1
E4 16 8 2 3 6 3 5 2 19 1
E5 12 12 5 8 8 3 4 5 7 6
E6 10 11 5 5 3 4 5 6 1 7
E7 1 5 2 2 3 3 3 3 2 1
E8 26 9 6 7 6 5 5 6 23 5
E9 28 7 7 8 5 5 5 3 16 5
E10 1 12 4 5 3 3 3 3 1 1
Rata-rata 12,7 9,8 5,6 5 4,9 3,8 3,9 4,3 9,9 3,5
jumlah klik
Jumlah
total rata- 6,34
rata klik
42
Tabel 4.6 Hasil kuesioner SUS situs web Kabupaten Sidoarjo
Pertanyaan kuesioner SUS SUS
Evaluator
P1 P2 P3 P4 P5 P6 P7 P8 P9 P10 Score
E1 4 2 4 3 4 2 4 2 3 5 62,5
E2 3 2 3 2 4 4 3 3 3 5 50
E3 3 4 3 4 4 2 2 4 2 5 37,5
E4 4 3 3 2 5 2 3 3 3 4 60
E5 3 3 3 2 3 2 3 2 3 2 60
E6 3 1 4 2 4 3 3 2 5 2 72,5
E7 4 3 4 1 4 3 3 2 4 5 62,5
E8 5 1 5 2 3 2 4 2 4 4 75
E9 3 3 4 4 5 4 4 3 4 5 52,5
E10 5 2 5 1 4 1 5 1 5 4 87,5
Rata-rata
62
Skor SUS
Berdasarkan data yang terdapat pada Tabel 4.6, berikut merupakan tingkat
kepuasan pengguna terhadap situs web Kabupaten Sidoarjo.
Terdapat 1 orang yang memberikan nilai “POOR” dibawah 40.
1 orang memberikan nilai pada rentang antara “POOR” hingga ”OK”
dengan jumlah 40-51.
6 orang memberikan nilai pada rentang antara “OK” hingga ”GOOD”
dengan jumlah 52-74.
1 orang memberikan nilai pada rentang antara “GOOD” hingga
”EXCELLENT” dengan jumlah 75-85.
1 orang memberikan nilai pada rentang antara ”EXCELLENT” hingga “Best
Imaginable” dengan jumlah 86-100.
Jumlah terbanyak adalah nilai pada rentang “OK” hingga “GOOD” dengan
nilai 52-74.
Hasil rata-rata perolehan skor SUS adalah 62.
Dari hasil perhitungan yang telah dilakukan, diketahui kualitas kepuasan
pengguna berdasarkan skala penilaian skor SUS pada gambar 2.12, situs web
Kabupaten Sidoarjo termasuk Grade D atau High Marginal yang memiliki kualitas
“Good”.
43
ketika melakukan pengujian task scenario situs web Kabupaten Sidoarjo. Tabel
4.7 menampilkan keluhan yang disampaikan evaluator kepada peneliti.
Tabel 4.7 Hasil rekapitulasi wawancara usability testing
Severity
No. Evaluator Keluhan / permasalahan
Rating
1. Evaluator 1 Mengalami kebingungan karena
terlalu banyak aplikasi yang 2
ditampilkan pada halaman Home.
2. Evaluator 1 Harusnya diberi pop-up berisi
pengumuman atau berita penting 2
yang sedang berlangsung saat ini.
3. Evaluator 1 Evaluator merasa kurang terbiasa
ketika mencari informasi pada 1
website.
4. Evaluator 2 Tampilan situs web terkesan
monoton dengan dominasi warna
1
hijau, seharusnya lebih berwarna
lagi.
5. Evaluator 2 Tulisan nama aplikasi pada
halaman Home seharusnya bisa di
klik, karena akan memudahkan 3
pengguna daripada hanya dapat
mengklik ikon aplikasi.
6. Evaluator 2 Ukuran ikon sosial media pada
header bagian atas halaman
Home seharusnya diperbesar agar 3
lebih mudah terlihat oleh
pengguna.
7. Evaluator 3 Tampilan video pada halaman
1
Home kurang menarik.
8. Evaluator 3 Evaluator harus melakukan klik
dua kali karena pada klik pertama 2
website tidak merespon.
9. Evaluator 4 Seharusnya gambar pada
halaman LAPOR bisa diklik, jangan 2
hanya ikon aplikasinya saja.
10. Evaluator 4 Seharusnya diberi keterangan
bagian mana yang harus di klik
3
untuk membuka halaman situs
web LAPOR.
44
Tabel 4.7 Hasil rekapitulasi wawancara usability testing (lanjutan)
Severity
No. Evaluator Keluhan / permasalahan
Rating
11. Evaluator 4 Seharusnya ikon sosial media
(bagian atas halaman Home)
diletakkan pada bagian tengah 2
seperti letak aplikasi pada
halaman Home situs web.
12. Evaluator 5 Evaluator merasa kurang tertarik
terhadap isi konten berita dan 1
agenda pada website.
13. Evaluator 5 Evaluator merasa kurang terbiasa
ketika mencari informasi pada 1
website.
14. Evaluator 6 Seharusnya pada halaman Lapor
diberi tulisan keterangan cara 3
untuk menulis laporan.
15. Evaluator 6 Ukuran aplikasi pada halaman
2
Home tidak sama.
16. Evaluator 7 Perbaikan tata letak aplikasi di
halaman Home yang kurang 3
tertapa rapi.
17. Evaluator 7 Lebih baik tampilan video Home
diganti slide gambar informasi 3
atau foto terkini.
18. Evaluator 7 Akun sosial media diletakkan
pada halaman kontak daripada
3
berukuran kecil di halaman Home
yang susah terlihat.
19. Evaluator 8 Evaluator merasa kebingungan
memilih menu untuk mencari
1
informasi tertentu karena kurang
terbiasa .
20. Evaluator 8 Ikon YouTube susah dilihat karena
terlalu kecil, sebaiknya di 3
letakkan pada informasi kontak.
21. Evaluator 9 Website kurang responsif,
terkadang harus melakukan klik
1
ulang karena tidak ada respon
ketika melakukan klik pertama.
45
Tabel 4.7 Hasil rekapitulasi wawancara usability testing (lanjutan)
Severity
No. Evaluator Keluhan / permasalahan
Rating
22. Evaluator 9 Isi konten halaman Perijinan
3
kurang jelas untuk dipahami.
23. Evaluator 9 Data alamat Polresta Sidoarjo
3
kurang up to date.
24. Evaluator 9 Website kurang menarik, dan isi
berita terkesan monoton
2
sehingga pengguna kurang
tertarik membaca isi beritanya.
25. Evaluator 9 Seharusnya gambar pada
3
halaman LAPOR bisa diklik.
26. Evaluator 9 Seharusnya ikon YouTube
berwarna merah agar lebih 2
terlihat seperti aslinya.
27. Evaluator 10 Seharusnya diberi informasi cara
3
mengurus E-KTP secara online.
28. Evaluator 10 Tulisan nama aplikasi pada menu
3
Pelayanan Publik terlalu kecil.
29. Evaluator 10 Ikon aplikasi pada menu
Pelayanan Publik kurang jelas
2
karena terlihat samar-samar
dengan background halaman.
30. Evaluator 10 Pengkategorian informasi kurang
tepat, sehingga pengguna masih
3
kebingungan untuk mengakses
informasi didalamnya.
31. Evaluator 10 Terlalu banyak aplikasi yang
ditampilkan pada halaman Home 2
situs web.
32. Evaluator 10 Sebaiknya lebih sering dilakukan
3
update informasi di situs web.
33. Evaluator 10 Seharusnya foto pada Sidoarjo
Gallery berisi sesuatu yang
menarik minat masyarakat jangan 2
hanya foto stadion GOR Delta
Sidoarjo.
46
4.4 Pengumpulan Data Permasalahan Evaluasi Heuristic
4.4.1 Hasil Temuan Permasalahan Evaluasi Heuristic
Pengumpulan data menggunakan metode evaluasi heuristic dilakukan
dengan memberikan kesempatan kepada 4 evaluator usability expert untuk
mengakses dan mengamati tampilan situs web Kabupaten Sidoarjo secara
individu. Setiap evaluator bertugas untuk menemukan permasalahan usability
pada situs web Kabupaten Sidoarjo berdasarkan 10 prinsip heuristic, yaitu
Visibility of system status, Match between system and the real world, User
control and freedom, Consistency and standards, Error prevention, Recognition
rather than recall, Flexibility and efficiency of use, Aesthetic and minimalist
design, Help users recognize, diagnose, and recover from errors, dan Help and
documentation. Setiap permasalahan yang ditemukan akan dicatat dan
ditentukan tingkat keparahannya (severity rating) oleh evaluator pada lembar
penilaian. Berikut merupakan data hasil temuan permasalahan dari masing-
masing evaluator dengan metode evaluasi heuristic.
1. Temuan permasalahan evaluator 1
Evaluator pertama pada evaluasi heuristic adalah Ibu Almira Syawli yang
berprofesi sebagai Dosen di Filkom UB. Proses evaluasi dilakukan di Gedung F
FILKOM - F9.2 pada tanggal 9 Mei 2019. Tabel 4.8 menunjukkan hasil temuan
permasalahan usability yang dilakukan oleh evaluator 1.
Tabel 4.8 Temuan permasalahan evaluator 1
47
Tabel 4.8 Temuan permasalahan evaluator 1 (lanjutan)
48
Tabel 4.8 Temuan permasalahan evaluator 1 (lanjutan)
51
Rating Heuristic Evaluator
8. Informasi alamat Supaya Informasi
dan kontak memudahkan alamat dan
instansi mencari info kontak
pemerintah penting terkait instansi
Kabupaten instansi pemerintah
Sidoarjo pemerintah Kabupaten
sebaiknya dibuat daerah dari Sidoarjo
menjadi menu 1 H5, H8 situs web ini. sebaiknya
sendiri (terpisah). dibuat
menjadi
menu sendiri
seperti menu
Fasilitas,
Layanan, dan
Publik.
52
Severity Prinsip Saran Evaluator
No. Permasalahan Keterangan
Rating Heuristic
3. Penulisan teks Warnanya Seharusnya
pada menu hampir diberi highlight
Informasi Publik terlihat sama agar warna
halaman Home 3 H5, H10 dengan teks kontras
terlihat samar background dengan warna
dengan warna halaman. background.
background.
4. Fitur tombol Ketika tombol Seharusnya
Submit pada Submit diklik fungsi tombol
halaman Kontak tidak Submit
belum berfungsi menjalankan diperbaiki agar
dengan baik. fungsi pengguna
apapun. dapat
4 H3, H7 mengajukan
pertanyaan
kepada
pengelolah
situs web
Kabupaten
Sidoarjo.
5. Tidak adanya Agar Seharusnya
keterangan pada pengguna nomor
halaman berapa mengetahui halaman yang
yang ditampilkan sedang ditampilkan
pengguna. 3 H5, H10 berada di diberi penanda
halaman dengan font
mana yang bold.
sedang
diakses.
6. Fitur komentar Ketika Seharusnya
pada halaman memberikan fungsi tombol
Pengumuman komentar komentar
belum berfungsi dengan diperbaiki agar
dengan baik. menekan pengguna
tombol dapat
3 H3, H7
komentar memberikan
malah komentarnya
menampilkan terkait
kesalahan informasi
kode pengumuman.
program.
Tabel 4.10 Temuan permasalahan evaluator 3 (lanjutan)
53
Severity Prinsip Saran Evaluator
No. Permasalahan Keterangan
Rating Heuristic
7. Tidak ada pesan Ketika Menambahkan
konfirmasi untuk pengguna pesan
download mengklik konfirmasi
dokumen. tombol sebelum
download, melakukan
sistem akan download
langsung dokumen.
2 H5, H10
melakukan
download
dokumen
tanpa ada
konfirmasi
terlebih
dahulu.
8. Fitur Fitur tampilan Seharusnya
menampilkan dokumen PDF fitur
dokumen PDF pada halaman menampilkan
tidak berfungsi Pengadaan dokumen PDF
dengan baik. H1, H7, Barang Jasa diperbaiki agar
4
H8 tidak dapat pengguna
menampilkan mengetahui isi
dokumen. dari dokumen
tersebut.
9. Sidebar halaman Jika sidebar Seharusnya
Agenda/Kegiatan MAYDAY fungsi sidebar
MAYDAY EXPO EXPO 2019 di MAYDAY EXPO
2019 tidak dapat klik malah 2019 diperbaiki
diakses. menampilkan agar pengguna
2 H3, H7 pesan dapat melihat
kesalahan informasi
kode mengenai
program. agenda
kegiatan May
Day.
54
Severity Prinsip Saran Evaluator
No Permasalahan Keterangan
Rating Heuristic
10. Tombol Agenda Jika tombol di Seharusnya
Selengkapnya klik melalui fitur tombol
dan halaman Agenda
Pengumuman Berita, Selengkapnya
Selengkapnya Pengumuman, dan
tidak berfungsi dan Kegiatan Pengumuman
dengan baik. 4 H3, H7 akan Selengkapnya
menampilkan diperbaiki agar
pesan pengguna
kesalahan dapat melihat
Page Not daftar
Found. informasi yang
lebih lengkap.
11. Tidak ada Halaman Seharusnya
informasi lapor hanya diberi
keterangan pada berisi gambar keterangan
halaman LAPOR. H5, H8, tampilan bagaimana cara
2 aplikasi tanpa membuat
H10
ada kata laporan pada
penjelasan. situs web
LAPOR.
12. Fungsi gambar Jika gambar Seharusnya
thumbnail pada thumbnail gambar
halaman diklik akan thumbnail
Agenda/Kegiatan, menampilkan diganti tombol
Berita, dan pesan kembali atau
2 H7, H8
Pengumuman kesalahan tombol Home.
tidak berjalan Page Not
dengan baik dan Found.
kurang
bermanfaat.
13. Gambar pada Jika gambar Seharusnya
menu Sidoarjo pada menu gambar pada
Gallery halaman Sidoarjo Sidoarjo Gallery
Home tidak dapat Gallery di klik dapat di zoom
diperbesar. H1, H3, akan out dan zoom
2 menampilkan in agar
H7
halaman memudahkan
Media pengguna
kosong. melihat
gambarnya.
Tabel 4.10 Temuan permasalahan evaluator 3 (lanjutan)
55
Severity Prinsip Saran Evaluator
No. Permasalahan Keterangan
Rating Heuristic
14. Halaman Media Tidak ada Seharusnya
tidak gambar atau pada halaman
menampilkan video yang Media
foto/gambar H1, H8, ditampilkan menampilkan
apapun. 4 pada halaman arsip foto
H10
Media. dokumentasi
Kabupaten
Sidoarjo.
15. Ketika pointer Pointer tidak Jika pointer
berada di ikon menampilkan berada di ikon
aplikasi tidak informasi aplikasi
menampilkan singkat seharusnya
informasi singkat tentang menampilkan
mengenai 2 H5, H10 aplikasi yang informasi
aplikasi tersebut. ingin diklik singkat
pengguna. mengenai
aplikasi
tersebut.
16. Jarak penomoran Nomor Penomoran
halaman halaman halaman
(paginasi) terlalu terlalu dekat (paginasi)
dekat. menyebabkan seharusnya
risiko diberi spasi
pengguna untuk
1 H5, H8 melakukan mengurangi
salah klik. kesalahan
pengguna
menekan
nomor
halaman yang
lain.
57
Severity Prinsip Saran
No. Permasalahan Keterangan Evaluator
Rating Heuristic
5. Keseluruhan Terlalu banyak Perlu
desain situs ruang kosong, dilakukan
web kurang terutama pada redesign atau
menarik. H1, H4, halaman Home desain ulang
3 dan Menu untuk
H8
Tentang memperbaiki
Sidoarjo. tampilan situs
web.
6. Masih banyak Pada halaman Seharusnya
link yang belum Gema Delta dan akses link
update dan Mitra Media diperbaiki
tidak dapat terdapat agar dapat
diakses. beberapa link berfungsi
yang tidak dapat dengan baik
3 H7, H9 diakses dan ketika diklik.
menampilkan
pesan kesalahan
tidak
ditemukannya
alamat URL pada
server.
7. Ketika menekan Ketika Seharusnya
tombol refresh melakukan fungsi pada
halaman pada refresh halaman situs web
web browser malah menuju disesuaikan
malah menuju H1, H4, ke halaman dengan fitur
4
ke halaman H6 Home. yang
Home. disediakan
pada web
browser.
8. Penataan Pada bagian Seharusnya
konten halaman berita diberi batas
informasi pada Pemkab Sidoarjo (margin) antar
beberapa Sambut Baik isi konten
halaman berita H1, H4, Penyelenggaraan informasi agar
2
tidak rapi. H8 Kampung tidak saling
Ramadhan JTV tumpang
isi kontennya tindih.
terlihat tumpang
tindih.
59
Severity Prinsip Saran
No. Permasalahan Keterangan Evaluator
Rating Heuristic
12. Tidak ada Pada menu Seharusnya
keterangan/ dropdown pada menu
penjelasan Pelaporan dropdown
untuk istilah Kinerja tidak diberi
asing bagi terdapat arti dari keterangan
pengguna. H1, H5, singkatan istilah singkat terkait
3
H10 asing bagi istilah asing
pengguna . tersebut.
Contohnya
LAKIP, LKPJ,
LPPD, dan
RLPPD.
13. Kurangnya Tidak Seharusnya
informasi yang dicantumkan menyertakan
dicantumkan nomor telepon nomor
pada halaman yang dapat telepon dan
Kontak. dihubungi informasi
2 H7, H10 pengguna. kontak lainnya
yang dapat
dihubungi
oleh
pengguna.
14. Tombol Submit Ketika tombol Seharusnya
tidak berfungsi Submit pada fungsi tombol
dengan baik halaman Kontak Submit
pada halaman diklik tidak diperbaiki
Kontak. menjalankan agar
fungsi apapun. pengguna
dapat
4 H3, H7 mengajukan
pertanyaan
kepada
pengelolah
situs web
Kabupaten
Sidoarjo.
15. Informasi Sidoarjo Dalam Perlu
Sidoarjo Dalam Angka diadakan
Angka belum H1, H2, menampilkan integrasi data
2
menampilkan H8 jumlah angka dengan pihak
data valid yang tidak sesuai instansi
secara real dengan data terkait agar
60
time. yang dapat
sebenarnya. menampilkan
data valid
sesuai real
time.
61
4.5 Analisis Hasil Temuan Permasalahan
4.5.1 Hasil Temuan Permasalahan Pengujian
Pada Tabel 4.12 menampilkan hasil konsolidasi temuan permasalahan
menggunakan metode usability testing.
Tabel 4.12 Temuan permasalahan usability testing
Keluhan / Severity
No Evaluator Saran Perbaikan
permasalahan Rating
1. Evaluator Aplikasi yang Perbaikan tata letak 2,25
1, ditampilkan pada aplikasi di halaman Home
Evaluator halaman Home terlalu yang kurang tertapa rapi.
6, banyak dan
Evaluator penataannya kurang
7, rapi.
Evaluator
10
2. Evaluator Halaman Home tidak Harusnya diberi pop-up 2
1 menampilkan pop up berisi pengumuman atau
terkait berita yang berita penting yang
sedang viral atau sedang berlangsung saat
barusaja terjadi. ini.
3. Evaluator Evaluator merasa Evaluator merasa 1
1, kurang terbiasa kebingungan memilih
Evaluator ketika mencari menu untuk mencari
5, informasi pada informasi tertentu karena
Evaluator website. kurang terbiasa.
8
4. Evaluator Evaluator merasa Tampilan situs web 1,3
2, kurang tertarik terkesan monoton
Evaluator terhadap isi konten dengan dominasi warna
5, berita dan agenda hijau, seharusnya lebih
Evaluator pada website. berwarna lagi.
9
5. Evaluator Tulisan nama aplikasi Seharusnya nama aplikasi 3
2 pada halaman Home juga dapat diklik, jangan
tidak dapat di klik hanya ikon aplikasinya
saja.
62
Tabel 4.12 Temuan permasalahan usability testing (lanjutan)
Keluhan / Severity
No Evaluator Saran Perbaikan
permasalahan Rating
6. Evaluator Ukuran ikon sosial Seharusnya diperbesar
2, media pada header atau diletakkan pada
Evaluator halaman Home halaman kontak dan
4, terlalu kecil agar lebih diberi warna yang sesuai
Evaluator mudah terlihat oleh dengan ikon aplikasi
2,6
7, pengguna sebenarnya agar mudah
Evaluator terlihat.
8,
Evaluator
9
7. Evaluator Tampilan video pada Lebih baik tampilan video
3, halaman Home Home diganti slide
2
Evaluator kurang menarik. gambar informasi atau
7 foto terkini.
8. Evaluator Website kurang Seharusnya responsifitas
3, responsif, terkadang situs web lebih
Evaluator harus melakukan klik ditingkatkan kembali.
9 ulang karena tidak 1,5
ada respon ketika
melakukan klik
pertama.
9. Evaluator Gambar pada Seharusnya gambar pada
4, halaman LAPOR tidak halaman LAPOR bisa
2,5
Evaluator dapat diklik. diklik, jangan hanya ikon
9 aplikasinya saja.
10. Evaluator Tidak ada keterangan Seharusnya pada
4, bagaimana cara halaman LAPOR diberi
Evaluator membuat laporan tulisan keterangan cara
3
6 pada situs web untuk menulis
aplikasi LAPOR. laporan/keluhan pada
situs web aplikasi LAPOR.
11. Evaluator Isi konten halaman -
9 Perijinan kurang jelas 3
untuk dipahami.
12. Evaluator Data alamat Polresta Seharusnya informasi
9 Sidoarjo kurang up to yang terdapat pada situs
3
date. web selalu di perbarui
agar up to date.
63
Tabel 4.12 Temuan permasalahan usability testing (lanjutan)
Keluhan / Severity
No Evaluator Saran Perbaikan
permasalahan Rating
13. Evaluator Kurang lengkapnya Seharusnya diberi
10 informasi yang informasi cara mengurus
3
dimuat pada situs E-KTP secara online.
web.
14. Evaluator Tulisan nama aplikasi Seharusnya ukuran font
10 pada menu diperbesar agar mudah
3
Pelayanan Publik dibaca oleh pengguna.
terlalu kecil.
15. Evaluator Ikon aplikasi pada Seharusnya diberi
10 menu Informasi highlight agar terlihat
Publik kurang jelas lebih kontras.
2
karena terlihat
samar-samar dengan
background halaman.
16. Evaluator Pengkategorian -
10 informasi kurang
tepat, sehingga
pengguna masih 3
kebingungan untuk
mengakses informasi
didalamnya.
17. Evaluator Pembaruan informasi Sebaiknya lebih sering
10 pada situs web dilakukan update
kurang update jika informasi di situs web.
3
dibanding dengan
portal website
lainnya.
18. Evaluator Kurangnya konten Seharusnya halaman
10 yang menarik bagi Sidoarjo Gallery berisi
2
pengguna. media yang dapat
menarik minat pengguna.
64
Pada Tabel 4.13 menampilkan hasil konsolidasi temuan permasalahan
menggunakan metode evaluasi heuristic.
Tabel 4.13 Temuan permasalahan evaluasi heuristic
65
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
66
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
67
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
68
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
69
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
70
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
71
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
72
Tabel 4.13 Temuan permasalahan evaluasi heuristic (lanjutan)
73
Tabel 4.14 Temuan permasalahan usability testing dan evaluasi heuristic
(lanjutan)
3. E4, E9 E3, E4 Gambar pada Seharusnya gambar
halaman LAPOR pada halaman LAPOR
tidak dapat diklik bisa diklik untuk di 2 2
untuk diperbesar zoom out dan zoom 3 3
tampilannya. in, jangan hanya ikon
aplikasinya saja.
4. E4, E6 E1, E2, Tidak ada Seharusnya pada
E3, E4 keterangan halaman LAPOR diberi 1
bagaimana cara tulisan keterangan 3 3
membuat cara untuk menulis
laporan pada laporan/keluhan pada 3 2
situs web situs web aplikasi 1
aplikasi LAPOR. LAPOR.
5. E10 E3 Ikon aplikasi Seharusnya diberi
serta teks pada highlight pada ikon
menu Informasi aplikasi dan teks di
Publik kurang bagian Informasi
jelas karena Publik
2 3
terlihat samar-
samar dengan
warna
background
halaman.
Pada tabel diatas, terdapat permasalahan yang paling banyak ditemukan oleh
evaluator terkait ikon aplikasi dan ikon sosial media pada situs web. Hampir
seluruh evaluator menemukan permasalahan tidak rapinya penataan ikon
aplikasi pada halaman Home situs web Kabupaten Sidoarjo. Pada permasalahan
lainnya, beberapa evaluator menganggap letak dan ukuran ikon sosial media
merupakan sebuah permasalahan, namun beberapa lainnya menganggap itu
bukan permasalahan karena sudah tepat, dan akan menjadi jelek apabila ikonnya
terlihat lebih besar.
74
BAB 5 HASIL DAN PEMBAHASAN
Bab ini membahas hasil analisis data dan menjelaskan tentang data-data yang
didapatkan dari hasil penelitian yang telah dilakukan menggunakan metode
usability testing dan heuristic evaluation terhadap situs web Kabupaten Sidoarjo.
80%
Keberhasilan
60%
40%
20%
0%
Tugas 1 Tugas 2 Tugas 3 Tugas 4 Tugas 5 Tugas 6 Tugas 7 Tugas 8 Tugas 9 Tugas 10
Keberhasilan evaluator
75
5.1.2 Analisis Efisiensi Situs Web Kabupaten Sidoarjo
Berikut merupakan grafik hasil pengukuran efisiensi situs web Kabupaten
Sidoarjo yang ditampilkan pada gambar 5.2 dan gambar 5.3. Data yang
ditampilkan pada Gambar 5.2 didapatkan dari hasil pengukuran waktu yang
digunakan evaluator dalam menyelesaikan setiap skenario tugas yang terdapat
pada Tabel 4.4. Sedangkan data yang ditampilkan pada Gambar 5.3 didapatkan
dari Tabel 4.5 yang berisi jumlah klik yang dilakukan evaluator untuk
menyelesaikan setiap skenario tugas.
70
60
50 45,2
40 34,4
30 24,2
18,3 16 15,8
20 12,2
10
0
Tugas 1 Tugas 2 Tugas 3 Tugas 4 Tugas 5 Tugas 6 Tugas 7 Tugas 8 Tugas 9 Tugas 10
76
Diagram Rata-Rata Jumlah Klik Evaluator
14 13
12
10 10
Rata-rata jumlah klik
10
8
6 6
6 5
4 4 4 4
4
0
Tugas 1 Tugas 2 Tugas 3 Tugas 4 Tugas 5 Tugas 6 Tugas 7 Tugas 8 Tugas 9 Tugas 10
77
Diagram Kepuasan Pengguna
100
87,5
90
80 72,5 75
70 62,5 60 60 62,5
SUS Scode
60 50 52,5
50
37,5
40
30
20
10
0
78
Tabel 5.1 Jumlah masalah usability testing per severity rating
Severity Rating
Evaluator Total
Don’t Agree Cosmetic Minor Major Catasthrope
E1 0 1 2 0 0 3
E2 0 1 0 2 0 3
E3 0 1 1 0 0 2
E4 0 0 2 1 0 3
E5 0 2 0 0 0 2
E6 0 0 1 1 0 2
E7 0 0 0 3 0 3
E8 0 1 0 1 0 2
E9 0 1 2 3 0 6
E10 0 0 3 4 0 7
Jumlah 0 7 11 15 0 33
79
Tabel 5.2 Jumlah masalah evaluasi heuristic per severity rating
Severity Rating
Evaluator Total
Don’t Agree Cosmetic Minor Major Catasthrope
E1 0 4 3 3 0 10
E2 0 2 3 3 0 8
E3 0 1 8 3 4 16
E4 0 2 4 5 4 15
Jumlah 0 9 18 14 8 49
5.4 Pembahasan
Berdasarkan analisis data yang telah dilakukan, selanjutnya setiap hasil
temuan permasalahan dikelompokkan berdasarkan kategori jenis masalah
tersebut. Berikut merupakan penjelasan dari tiap-tiap permasalahan yang
ditemukan oleh evaluator ketika mengevaluasi situs web Kabupaten Sidoarjo.
Pembahasan permasalahan berupa pemberian rekomendasi perbaikan sesuai
dengan urutan tingkat severity rating dari yang tinggi ke yang rendah.
80
Gambar 5.5 Gambar permasalahan fungsional satu
Tabel 5.3 Hasil temuan masalah fungsional satu.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Fitur menampilkan Seharusnya fitur
3 dokumen PDF tidak menampilkan
berfungsi dengan dokumen PDF
baik. H1, H7, diperbaiki agar
4
H8 pengguna
mengetahui isi
dari dokumen
tersebut.
81
permasalahan fitur menampilkan dokumen PDF yang tidak berfungsi dengan
baik.
82
browser.
Pada Tabel 5.4 diketahui bahwa evaluator 4 menemukan permasalahan ketika
menekan tombol refresh halaman pada web browser malah menuju ke halaman
Home. Nilai severity rating untuk permasalahan ini adalah 4. Solusi dari masalah
ini adalah seharusnya fungsi pada situs web disesuaikan dengan fitur yang
disediakan pada web browser agar fitur tombol berfungsi dengan benar. Saran
perbaikan ini sesuai dengan teori yang dikemukakan oleh Collis Ta’eed (2007),
tombol untuk navigasi situs web harus mudah ditemukan. Teks pada tombol juga
harus cukup jelas menerangkan fungsi tujuan dari tombol tersebut.
5.4.1.3 Permasalahan Fungsional 3
Penemuan masalah fungsional tiga adalah fitur tombol Submit pada halaman
Kontak belum berfungsi dengan baik.
Tabel 5.5 Hasil temuan masalah fungsional tiga.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Fitur tombol Submit Seharusnya
3, pada halaman fungsi tombol
Evaluator Kontak belum Submit
4 berfungsi dengan diperbaiki agar
baik. pengguna dapat
H3, H7 4 mengajukan
pertanyaan
kepada
pengelolah situs
web Kabupaten
Sidoarjo.
83
melalui halaman Berita, Pengumuman, dan Kegiatan akan menampilkan pesan
kesalahan Page Not Found seperti yang ditunjukkan pada gambar 5.7.
Penemuan masalah fungsional lima adalah halaman kegiatan May Day tidak
dapat diakses. Ketika halaman May Day dibuka malah menampilkan pesan
kesalahan code program seperti yang ditunjukkan pada gambar 5.8.
84
Gambar 5.8 Gambar permasalahan fungsional lima
Tabel 5.7 Hasil temuan masalah fungsional lima.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Halaman kegiatan Seharusnya
4 May Day tidak tampilan
dapat diakses. halaman May
Day segera
diperbaiki agar
H3, H7 4 pengguna dapat
melihat
informasi
mengenai
agenda kegiatan
May Day.
85
Gambar 5.9 Gambar permasalahan fungsional enam
Tabel 5.8 Hasil temuan masalah fungsional enam.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Server mengalami Sebaiknya
1 down ketika diadakan
diakses. perbaikan atau
H3, H9 3 perawatan
server agar tidak
mengalami
down server.
86
Pada Tabel 5.9 diketahui bahwa evaluator 3 menemukan permasalahan
terkait fungsi fitur komentar pada halaman Pengumuman yang belum berfungsi
dengan baik. Nilai severity rating untuk permasalahan ini adalah 3. Solusi dari
masalah ini adalah seharusnya fungsi tombol komentar diperbaiki agar pengguna
dapat memberikan komentarnya terkait informasi pengumuman. Saran
perbaikan ini sesuai dengan teori yang dikemukakan oleh Collis Ta’eed (2007),
meski telah membuat desain yang menarik, penting untuk memastikan bisa
tidaknya fitur tersebut berjalan dengan baik.
5.4.1.8 Permasalahan Fungsional 8
Penemuan masalah fungsional delapan adalah masih banyak link yang belum
update sehingga tidak dapat diakses oleh pengguna.
Tabel 5.10 Hasil temuan masalah fungsional delapan.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Masih banyak link Seharusnya
4 yang belum update akses link
sehingga tidak diperbaiki agar
H7, H9 3
dapat diakses oleh dapat berfungsi
pengguna. dengan baik
ketika diklik.
87
Gambar 5.10 Gambar permasalahan fungsional sembilan
Tabel 5.11 Hasil temuan masalah fungsional sembilan.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Sidebar halaman Seharusnya
3 Agenda/Kegiatan fungsi sidebar
MAYDAY EXPO MAYDAY EXPO
2019 tidak dapat 2019 diperbaiki
diakses. agar pengguna
H3, H7 2
dapat melihat
informasi
mengenai
agenda kegiatan
May Day.
88
Gambar 5.11 Gambar permasalahan tampilan satu
Tabel 5.12 Hasil temuan masalah tampilan satu.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Fitur halaman Seharusnya
2, Media tidak pada halaman
Evaluator menampilkan Media
3, gambar apapun H1, H3, menampilkan
3,6
Evaluator setelah pengguna H8, H10 arsip foto
4 mengklik foto pada dokumentasi
Sidoarjo Gallery. Kabupaten
Sidoarjo.
89
Gambar 5.12 Gambar solusi perbaikan permasalahan tampilan satu
5.4.2.2 Permasalahan Tampilan 2
90
Gambar 5.13 Gambar permasalahan tampilan dua
91
Tabel 5.13 Hasil temuan masalah tampilan dua.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Keseluruhan desain Perlu dilakukan
4 situs web kurang redesign atau
menarik. desain ulang
H1, H4,
3 untuk
H8
memperbaiki
tampilan situs
web.
92
Gambar 5.14 Gambar solusi perbaikan permasalahan tampilan dua
5.4.2.3 Permasalahan Tampilan 3
93
Gambar 5.15 Gambar permasalahan tampilan tiga
Tabel 5.14 Hasil temuan masalah tampilan tiga.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Tidak ada Seharusnya
4 keterangan / pada menu
penjelasan untuk dropdown diberi
H1, H5,
istilah asing bagi 3 keterangan
H10
pengguna. singkat terkait
istilah asing
tersebut.
95
Gambar 5.18 Gambar solusi perbaikan permasalahan tampilan empat
5.4.2.5 Permasalahan Tampilan 5
96
Collis Ta’eed (2007), salah satu kebiasaan buruk pengembang situs web adalah
membuat teks dengan kontras yang rendah. Hal ini terlihat bagus namun tidak
terbaca dengan baik. Kontras dapat menjadi pembeda yang membuat objek lebih
menonjol sehingga mudah terlihat. Gambar 5.20 merupakan gambar hasil
perbaikan untuk permasalahan penulisan teks pada menu Informasi Publik
halaman Home yang terlihat samar dengan warna background.
97
Pada Tabel 5.17 diketahui bahwa evaluator 3 menemukan permasalahan
tidak adanya keterangan pada halaman berapa yang ditampilkan pengguna
sehingga pengguna tidak mengetahui sedang berada di halaman mana yang
sedang diakses. Nilai severity rating untuk permasalahan ini adalah 3. Solusi dari
masalah ini adalah seharusnya nomor halaman yang ditampilkan diberi penanda
dengan font bold. Gambar 5.22 merupakan gambar hasil perbaikan untuk
permasalahan tidak adanya keterangan pada halaman berapa yang ditampilkan
pengguna.
98
5.4.2.8 Permasalahan Tampilan 8
100
Pada Tabel 5.20 diketahui bahwa evaluator 1 dan 4 menemukan
permasalahan yang sama terkait informasi yang dicantumkan pada halaman
Kontak kurang lengkap. Halaman Kontak hanya menampilkan cara
menyampaikan keluhan melalui email namun tidak mencantumkan nomor
telepon yang dapat dihubungi. Nilai severity rating untuk permasalahan ini
adalah 2,5. Solusi dari masalah ini adalah seharusnya pada halaman Kontak
dicantumkan nomor telepon dan informasi kontak lainnya yang dapat dihubungi
oleh pengguna. Gambar 5.26 merupakan gambar hasil perbaikan untuk
permasalahan informasi pada halaman Kontak yang kurang lengkap.
101
5.4.2.10 Permasalahan Tampilan 10
102
Gambar 5.28 Gambar solusi perbaikan permasalahan tampilan sepuluh
5.4.2.11 Permasalahan Tampilan 11
Penemuan masalah tampilan sebelas adalah ukuran gambar ikon sosial media
yang terdapat pada bagian header terlalu kecil sehingga jarang terlihat oleh
pengguna situs web Kabupaten Sidoarjo seperti yang ditunjukkan pada gambar
5.29.
103
Pada Tabel 5.22 diketahui bahwa evaluator 1 dan 2 menemukan
permasalahan yang sama yaitu ukuran gambar ikon sosial media yang terdapat
pada bagian header terlalu kecil sehingga pengguna jarang melihat bagian
tersebut. Dari hasil perhitungan rata-rata nilai severity rating untuk
permasalahan ini adalah 2. Solusi dari masalah ini adalah seharusnya ikon sosial
media diperbesar dan warnanya disesuaikan dengan ikon aplikasi sebenarnya.
Mungkin agar lebih mudah terlihat oleh pengguna situs web, ikon sosial media
diletakkan pada bagian footer situs web dan diberi keterangan “Temukan Kami
Disini”. Gambar 5.30 merupakan gambar hasil perbaikan untuk permasalahan
ukuran gambar ikon sosial media yang terlalu kecil.
Penemuan masalah tampilan duabelas adalah tulisan Cuti Online pada bagian
Penyelenggara Pemerintahan halaman Home tidak rapi seperti yang ditunjukkan
pada gambar 5.31.
104
Pada Tabel 5.23 diketahui bahwa evaluator 3 menemukan permasalahan
tulisan Cuti Online pada bagian Penyelenggara Pemerintahan halaman Home
yang tidak rapi. Tulisan Cuti Online jaraknya terlalu kebawah dari ikon
aplikasinya. Nilai severity rating untuk permasalahan ini adalah 2. Solusi dari
masalah ini adalah seharusnya penulisan Cuti Online disamakan seperti judul
aplikasi lainnya agar sejajar. Saran perbaikan ini sesuai dengan prinsip desain
situs web yang efektif yaitu layout berbasis grid untuk mengatur konten menjadi
beberapa bagian, kolom dan kotak yang berbaris dan terasa seimbang yang
bertujuan agar desain situs web terlihat lebih baik (Muhammad Basuki, 2019).
Gambar 5.32 merupakan gambar hasil perbaikan untuk permasalahan tulisan
Cuti Online yang tidak rapi.
105
Gambar 5.33 Gambar permasalahan tampilan tigabelas
106
Tabel 5.24 Hasil temuan masalah tampilan tigabelas.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Penataan konten Seharusnya
4 informasi pada diberi batas
beberapa halaman (margin) antar
H1, H4,
berita tidak rapi. 2 isi konten
H8
informasi agar
tidak saling
tumpang tindih.
107
Gambar 5.34 Gambar solusi perbaikan permasalahan tampilan tigabelas
5.4.2.14 Permasalahan Tampilan 14
108
Gambar 5.35 Gambar permasalahan tampilan empatbelas
Tabel 5.25 Hasil temuan masalah tampilan empatbelas.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Informasi Sidoarjo Perlu diadakan
4 Dalam Angka belum integrasi data
menampilkan data dengan pihak
valid secara real H1, H2, instansi terkait
2
time. H8 agar dapat
menampilkan
data valid sesuai
real time.
109
Gambar 5.36 Gambar permasalahan tampilan limabelas
Tabel 5.26 Hasil temuan masalah tampilan limabelas.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Ikon beberapa Seharusnya tiap
1 aplikasi pada aplikasi memiliki
Informasi Publik H5, H6, ikon yang
2
halaman Home H8 berbeda sebagai
memiliki gambar identitasnya.
yang sama.
110
Tabel 5.27 Hasil temuan masalah tampilan enambelas.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Tidak ada pesan Menambahkan
3 konfirmasi untuk pesan
download konfirmasi
dokumen. H5, H10 2 sebelum
melakukan
download
dokumen.
111
Tabel 5.28 Hasil temuan masalah tampilan tujuhbelas.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Ketika pointer Jika pointer
3 berada di ikon berada di ikon
aplikasi tidak aplikasi
menampilkan seharusnya
informasi singkat menampilkan
H5, H10 2
mengenai aplikasi informasi
tersebut. singkat
mengenai
aplikasi
tersebut.
112
Gambar 5.39 Gambar permasalahan tampilan delapanbelas
114
Gambar 5.41 Gambar solusi perbaikan permasalahan tampilan delapanbelas
115
Gambar 5.42 Gambar solusi perbaikan permasalahan tampilan delapanbelas
5.4.2.19 Permasalahan Tampilan 19
116
Gambar 5.43 Gambar permasalahan tampilan sembilanbelas
Tabel 5.30 Hasil temuan masalah tampilan sembilanbelas.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Belum adanya Seharusnya
1, konsistensi seluruh
Evaluator penggunaan bahasa penulisan
2 pada halaman konten
Kontak dan diseragamkan
H2, H4 1,5
penulisan tanggal menggunakan
pada situs web. bahasa
indonesia
sebagai kearifan
lokal.
117
Gambar 5.44 merupakan gambar hasil perbaikan untuk permasalahan belum
adanya konsistensi penggunaan bahasa pada halaman Kontak dan penulisan
tanggal pada situs web.
118
Gambar 5.45 Gambar permasalahan tampilan duapuluh
Tabel 5.31 Hasil temuan masalah tampilan duapuluh.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Gambar thumbnail Sebaiknya
1, pada halaman gambar
Evaluator Agenda/Kegiatan, thumbnail
3 Berita, dan dihapus karena
Pengumuman H7, H8 1,5 dinilai kurang
kurang bermanfaat efisien atau
dan tidak berjalan diganti tombol
dengan baik. kembali atau
tombol Home.
120
Gambar 5.48 Gambar solusi perbaikan permasalahan tampilan duapuluhsatu
5.4.2.22 Permasalahan Tampilan 22
121
Gambar 5.49 Gambar permasalahan tampilan duapuluhdua
Tabel 5.33 Hasil temuan masalah tampilan duapuluhdua.
Temuan Prinsip Severity
No Ditemukan Saran Perbaikan
Permasalahan Heuristic Rating
1. Evaluator Pada halaman Pada halaman
2 Fasilitas Pendidikan Fasilitas
tidak terdapat link Pendidikan
H1, H3,
situs web sekolah 1 sebaiknya diberi
H10
yang dapat diakses link menuju
oleh pengguna. situs web
sekolah.
122
Pada Tabel 5.33 diketahui bahwa evaluator 2 menemukan permasalahan
tidak adanya link situs web sekolah yang dapat diakses oleh pengguna pada
halaman Fasilitas Pendidikan. Nilai severity rating untuk permasalahan ini adalah
1. Solusi dari masalah ini adalah sebaiknya pada halaman Fasilitas Pendidikan
diberi link menuju situs web sekolah. Saran perbaikan ini sesuai dengan teori
yang dikemukakan oleh Collis Ta’eed (2007), tombol untuk navigasi situs web
harus mudah ditemukan. Teks pada tombol juga harus cukup jelas menerangkan
fungsi tujuan dari tombol tersebut. Gambar 5.50 merupakan gambar hasil
perbaikan untuk permasalahan tidak adanya link situs web sekolah yang dapat
diakses oleh pengguna pada halaman Fasilitas Pendidikan.
124
Pada Tabel 5.34 diketahui bahwa evaluator 1 menemukan permasalahan
tidak adanya konsistensi penataan letak gambar pada isi konten halaman situs
web. Beberapa gambar pada halaman Profil Masyarakat dan Ekonomi dan Bisnis
menggunakan rata tengah, sedangkan beberapa gambar lainnya menggunakan
rata kiri. Nilai severity rating untuk permasalahan ini adalah 1. Solusi dari
masalah ini adalah seharusnya ada standar penataan tata letak gambar agar
seluruh gambar memiliki rata tengah yang sama. Gambar 5.52 merupakan
gambar hasil perbaikan untuk permasalahan konsistensi penataan letak gambar
pada isi konten halaman situs web. Saran perbaikan ini sesuai dengan teori yang
dikemukakan oleh Collis Ta’eed (2007), menjaga agar tampilan konten sesuai
dengan lined up-nya adalah hal penting dalam desain situs web. Namun bukan
berarti bahwa segala sesuatu harus dalam satu garis, melainkan desain tampilan
situs web harus harus menjaga konsisten penempatan pada halaman. Aligning
(penyelarasan) membuat tampilan desain anda lebih teratur dan mudah dicerna,
sekaligus membuatnya tampak lebih tertata.
125
Gambar 5.52 Gambar solusi perbaikan permasalahan tampilan duapuluhtiga
5.4.2.24 Permasalahan Tampilan 24
127
BAB 6 PENUTUP
6.1 Kesimpulan
Berdasarkan hasil dari pembahasan yang terdapat pada bab 5, maka
dihasilkan kesimpulan untuk penelitian ini sebagai berikut:
1. Dari hasil pengujian skenario tugas kepada evaluator pengguna situs
web Kabupaten Sidoarjo, didapatkan nilai efektivitas sebesar 100%
karena seluruh evaluator dapat menyelesaikan semua tugas yang
diberikan dengan benar. Jumlah rata-rata waktu yang dibutuhkan
evaluator untuk menyelesaikan setiap tugas yaitu 40 detik, sedangkan
jumlah rata-rata klik yang dilakukan oleh evaluator sebanyak 6 klik. Hasil
pengukuran kepuasan pengguna yang didapatkan dari pengisian
kuesioner SUS oleh evaluator menghasilkan skor sebesar 62 yang
termasuk Grade D atau High Marginal yang memiliki kualitas “Good”.
2. Hasil dari pengujian usability testing menemukan total 33 permasalahan
usability terkait situs web Kabupaten Sidoarjo, namun beberapa
diantaranya merupakan permasalahan yang sama. Dari 33
permasalahan tersebut, terdapat 18 permasalahan yang berbeda satu-
sama lain. Dari total 33 permasalahan tersebut, terdapat 7
permasalahan bersifat cosmetic, 11 permasalahan minor, dan 15
permasalahan major.
3. Dari hasil pengujian evaluasi heuristic menemukan total 49
permasalahan, dengan jumlah 33 permasalahan yang berbeda dan
sisanya merupakan permasalahan yang sama. Dari total 49
permasalahan tersebut, terdapat 9 permasalahan bersifat cosmetic, 18
permasalahan minor, 14 permasalahan major, dan 8 permasalahan
catasthrope.
4. Dari hasil pengelompokan permasalahan, terdapat 9 permasalahan
terkait fungsional situs web dan terdapat 24 permasalahan terkait
tampilan situs web. Dari hasil permasalahan tersebut, didapatkan saran
rekomendasi untuk perbaikan situs web Kabupaten Sidoarjo diantaranya
yaitu seharusnya penataan ikon aplikasi pada halaman Home situs web
ditata rapi menggunakan layout berbasis grid untuk mengatur konten
agar sejajar dan tidak menyisahkan ruang kosong, menambahkan
keterangan pada setiap gambar yang terdapat pada situs web agar
memudahkan pengguna mengetahui informasi dari gambar tersebut,
menambahkan gambar dan video sebagai arsip dokumentasi pada
bagian Sidoarjo Gallery agar tidak kosong, dan memperbaiki fungsi dari
beberapa tombol dan kolom komentar agar berfungsi dengan baik.
128
6.2 Saran
Saran untuk penelitian selanjutnya sebaiknya jumlah evaluator yang terlibat
dalam pengujian usability testing lebih banyak lagi dengan masing-masing latar
belakang yang berbeda agar didapatkan data yang lebih variatif dari masyarakat
Kabupaten Sidoarjo. Dalam menentukan evaluator, lebih baik memilih evaluator
yang memiliki antusias terhadap situs web Kabupaten Sidoarjo agar diharapkan
evaluator memberikan penilaian yang maksimal agar dihasilkan data temuan
masalah yang beragam. Sedangkan saran dalam memilih evaluator untuk
pengujian evaluasi heuristic sebaiknya evaluator yang terlibat memiliki sifat yang
kritis dalam menemukan permasalahan dan memiliki pengalaman di bidang
evaluasi usability agar informasi yang didapatkan dapat maksimal.
129
DAFTAR PUSTAKA
Arifin, Yulyani, 2018. Kenal Dekat dengan Usability Testing [Online] Tersedia di:
<http://socs.binus.ac.id/2018/08/09/kenal-dekat-dengan-usability-
testing/> [Diakses 20 Januari 2019]
Alfarisi, F.H., 2016. Evaluasi Situs Web Resmi Pemerintah Kabupaten Situbondo
Menggunakan Metode Heuristic Evaluation. S1. Universitas Brawijaya.
Tersedia di: <http://repository.ub.ac.id/146862/> [Diakses 20 Januari 2019]
Amirullah, 2015. Populasi dan Sampel (Pemahaman, Jenis, dan Teknik). Malang:
Bayumedia Publishing.
Asosiasi Penyelenggara Jasa Internet Indonesia, 2018. Buletin APJII Edisi 23 April
2018 Potret Zaman Now Pengguna & Perilaku Internet Indonesia. [pdf]
Asosiasi Penyelenggara Jasa Internet Indonesia. Tersedia di:
<https://apjii.or.id/downfile/file/BULETINAPJIIEDISI23April2018.pdf>
[Diakses 2 April 2019]
Basuki, Muhammad, 2019. 10 Prinsip Desain Web yang Efektif [Online] Tersedia
di: <https://bk27.co.id/literasi/32/10-prinsip-desain-web-yang-
efektif.html/> [Diakses 20 Juni 2019]
Brooke, J., 2013. SUS: A Retrospective. Journal of Usability Studies, [e-journal].
Tersedia melalui: Usability Professionals Association
<https://uxpajournal.org/sus-a-retrospective/> [Diakses 20 Januari 2019]
Churchill, G.A., 2005. Dasar-dasar riset pemasaran, edisi 4, jilid 1. Diterjemahkan
dari Bahasa Inggris oleh Andriani, Dkk. Jakarta: Penerbit Erlangga.
Instruksi Presiden Republik Indonesia, 2003. Kebijakan Dan Strategi Nasional
Pengembangan E-Government. Presiden Republik Indonesia. Tersedia di:
<https://jdih.kominfo.go.id/produk_hukum/view/id/326/t/instruksi+presid
en+nomor+3+tahun+2003+tanggal+9+juni+2003> [Diakses 13 Februari
2019]
International Standards Office, 2018. ISO 9241–11:2018 Ergonomics of human -
system interaction [Online] Tersedia di:
<https://www.iso.org/obp/ui/#iso:std:iso:9241:-11:ed-2:v1:en/> [Diakses
13 Februari 2019]
Kementerian Komunikasi dan Informatika RI, 2008. Keterbukaan Informasi Publik.
[pdf] Kementerian Komunikasi dan Informatika RI. Tersedia di:
<https://jdih.kominfo.go.id/produk_hukum/view/id/172/t/undangundang+
nomor+14+tahun++2008+tanggal+30+april+2008> [Diakses 13 Februari
2019]
Macefield, R., 2009. How to specify the participant group size for usability
studies: A practitioner’s guide, edisi 5, jilid 1. Wolverhampton: Journal Of
Usability Studies.
130
Margono, S., 2007. Metodologi Penelitian Pendidikan Komponen MKDK. Jakarta:
PT. Rineka Cipta.
Morris, W., 1973. The American Heritage Dictionary of the English Language.
Boston: Houghton Miffin.
Nielsen, J., 1994a. How to Conduct a Heuristic Evaluation [Online] Tersedia di:
<https://www.nngroup.com/articles/how-to-conduct-a-heuristic-
evaluation/> [Diakses 20 Januari 2019]
Nielsen, J., 1994b. 10 Usability Heuristics for User Interface Design [Online]
Tersedia di: <https://www.nngroup.com/articles/ten-usability-heuristics/>
[Diakses 20 Januari 2019]
Nielsen, J., 1994c. Severity Ratings for Usability Problems [Online] Tersedia di:
<https://www.nngroup.com/articles/how-to-rate-the-severity-of-usability-
problems/> [Diakses 20 Januari 2019]
Nielsen, J., 1995. Characteristics of Usability Problems Found by Heuristic
Evaluation [Online] Tersedia di:
<https://www.nngroup.com/articles/usability-problems-found-by-heuristic-
evaluation/> [Diakses 20 Januari 2019]
Nielsen, J., 2000. Why You Only Need to Test with 5 Users [Online] Tersedia di:
<https://www.nngroup.com/articles/why-you-only-need-to-test-with-5-
users/> [Diakses 20 Januari 2019]
Nielsen, J., 2012. Usability 101: Introduction to Usability [Online] Tersedia di:
<https://www.nngroup.com/articles/usability-101-introduction-to-
usability/> [Diakses 20 Januari 2019]
Peraturan Daerah Kabupaten Sidoarjo nomor 11 tahun 2016 tentang
Pembentukan Dan Susunan Perangkat Daerah Kabupaten Sidoarjo.
Sidoarjo: Bupati Sidoarjo.
Sharfina, Z. dan Budi S.H., 2016. An Indonesian adaptation of the System
Usability Scale (SUS) Tersedia di:
<https://ieeexplore.ieee.org/document/7872776> [Diakses 8 April 2019]
Singh, A.K., 2002. Tests, Measurements and Research Methods in Behavioral
Sciences. Patna: Bharti Bhavan.
Sugiyono, 2010. Metode Penelitian Administratif. Bandung: Alfabeta.
Ta’eed, C., 2007. 9 Prinsip Penting untuk Desain Web yang Baik [Online] Tersedia
di: <https://design.tutsplus.com/id/tutorials/9-essential-principles-for-
good-web-design--psd-56/> [Diakses 20 Juni 2019]
U.S. Department of Health & Human Services. Usability Testing [Online] Tersedia
di: <https://www.usability.gov/how-to-and-tools/methods/usability-
testing.html> [Diakses 20 Januari 2019]
131
U.S. Department of Health & Human Services. Scenarios [Online] Tersedia di:
<https://www.usability.gov/how-to-and-tools/methods/scenarios.html>
[Diakses 20 Januari 2019]
U.S. Department of Health & Human Services. System Usability Scale [Online]
Tersedia di: <https://www.usability.gov/how-to-and-
tools/methods/system-usability-scale.html> [Diakses 20 Januari 2019]
Yang, C. H., 2016. Analysis of e-commerce sites using the 7C Framework, by
developing a software tool. Use of Thesis, [e-journal]. Tersedia melalui:
Unitec Institute of Technology
<https://pdfs.semanticscholar.org/b523/9c3e9728dd07897d6c5850571748
115c9291.pdf> [Diakses 20 Januari 2019]
132
LAMPIRAN A HASIL WAWANCARA ANALISIS TASK
SCENARIO GOAL
133
1. Ingin melihat berita terbaru yang ada di sidoarjo dan progres
pemerintahan kabupaten sidoarjo
2. Menu fasilitas, layanan, kinerja
3. Harapannya diberi Informasi prestasi seperti cat walk pemilihan cak dan
ning atau prestasi lainnya yg telah dicapai masyarakat/pemerintahan
sidoarjo.
134
LAMPIRAN B LEMBAR PERSETUJUAN EVALUATOR
135
136
137
138
139
140
141
142
143
144
145
146
147
148
LAMPIRAN C DAFTAR HADIR PESERTA PENGUJIAN
149
LAMPIRAN D HASIL PENGISIAN KUESIONER SUS
150
151
152
153
154
155
156
157
158
159
LAMPIRAN E DOKUMEN EVALUASI HEURISTIC
160
Fleksibilitas dan efisiensi penggunaan yaitu sistem memberikan
kemudahan terhadap pengguna baru maupun pengguna lama agar
mendapat kenyamanan ketika menjalankan sistem.
8. Aesthetic and minimalist design
Desain estetika dan minimalis yaitu sistem memiliki tampilan yang menarik
dan menampilkan dialog informasi dan keterangan yang relevan atau
dibutuhkan pengguna.
9. Help users recognize, diagnose, and recover from errors
Membantu pengguna mengenali, mendiagnosis, dan memulihkan dari
kesalahan yaitu pesan kesalahan harus dinyatakan dalam bahasa
sederhana yang mudah dipahami pengguna, dapat menunjukkan masalah
secara tepat, dan secara konstruktif memberikan solusi.
10. Help and documentation
Bantuan dan dokumentasi yaitu sistem dapat memberikan bantuan dan
dokumentasi panduan yang dapat membantu pengguna ketika
menjalankan sistem. Setiap informasi tersebut harus mudah dicari dan
difokuskan untuk membantu pengguna menyelesaikan pekerjaannya.
Kemudian mengelompokkan permasalahan yang telah ditemukan sesuai severity
rating berikut ini :
0 = Don't Agree: Hal ini bukan termasuk masalah usability.
1 = Cosmetic Problem: Tidak perlu ada perbaikan kecuali ada waktu
tambahan.
2 = Minor Usability Problem: Perbaikan masalah dengan prioritas rendah.
3 = Major Usability Problem: Merupakan permasalahan prioritas tinggi yang
harus segera diperbaiki.
4 = Usability Catasthrope: Sebelum produk dirilis, permasalahan ini harus
diperbaiki dahulu.
161