GROUP 3

USABILITY TEST
REPORT
FITUR GOMART
GOJEK APP

INDAH PUSPA MURNI (471601)

M. FAHRUDIN MUNA (452076)
NABILA MUTHIAH ZAHRA (470134)
WATRI WIDYASTUTI (470135)
USABILITY TEST REPORT

DAFTAR ISI
EXECUTIVE SUMMARY 1

INTRODUCTION 2

METHODS 3

A. Participants 3
b. Usability Assessment Methods 4

C. Protocol 4

D. Data Analysis 6

RESULTS 7

A. Usability Problem That You Found 7

B. Proposed Countermeasures/Recomendations 10

DAFTAR PUSTAKA

LAMPIRAN
USABILITY TEST REPORT
HAL 01
EXECUTIVE SUMMARY

EXECUTIVE SUMMARY
Laporan ini disusun untuk menjelaskan usability testing terhadap fitur GoMart pada
aplikasi Gojek. GoMart merupakan fitur yang menyediakan layanan belanja online untuk
memenuhi kebutuhan sehari-hari dengan sejumlah merchant partner. Tujuan dari
penelitian ini yaitu mengidentifikasi masalah usabilitas pada fitur GoMart dan
memberikan rekomendasi terkait peningkatan effectiveness, usefulness, eficiency, dan
customer satisfaction.
Penelitian dilakukan secara daring dan dalam satu iterasi dengan dua sesi. Pada sesi
pertama digunakan metode Thinking Aloud dengan tiga task untuk mendapatkan
gambaran terkait apa yang dipikirkan oleh partisipan sedangkan pada sesi kedua
digunakan metode interview yang terdiri dari 17 open ended question untuk
mendapatkan detail informasi terkait permasalahan dan saran perbaikan dari sudut
pandang user. Setiap task di random untuk tiap responden berdasarkan aplikasi random
generator . Responden berjumlah 6 orang user (2 wanita dan 4 pria) dengan usia rata -
rata 24 ± 0,63 dan memiliki kriteria: pengguna Gojek yang tidak pernah menggunakan
fitur GoMart, memiliki pengalaman berbelanja online dan komunikatif.
Hasil dari penelitian menunjukkan tingkat keberhasilan (effectiveness) user dalam
mengerjakan task rata – rata sebesar 88,89%. Penggunaan Fitur searching pada
pencarian produk dapat dikatakan lebih efisien karna responden cenderung lebih cepat
menyelesaikan task tersebut dibandingkan dengan fitur filter. Usefulness dari fitur
GoMart yang diidentifikasi yaitu memberikan kemudahan berbelanja kebutuhan di masa
pandemi dan sebagai wadah untuk melakukan checking harga barang secara real time
sehingga lebih efisien terhadap waktu. Sementara itu pada poin easy of use, fitur
searching dapat dikatakan lebih mudah digunakan karna lebih banyak dipilih oleh
responden (4 dari 6 orang) dibandingkan fitur filter. Walaupun begitu, kedua fitur
tersebut masih memiliki keterbatasan yang harus di perbaiki. Berikut rekomendasi
perbaikan yang didapatkan pada penelitian:
1. Diberikan notifikasi tentang customize penyusunan layout
2. Diberikan fitur searching lokasi toko terdekat, toko terlengkap, dan barang yang dicari
3. Dibedakan gambar ikon pada setiap fitur kategori
4. Diberikan notifikasi keyword dari produk yang sering dicari
5. Display untuk keranjang pembelian dibuat tetap
6. Menginformasikan kuantitas stock produk
7. Informasi (promo, best deal of the week,dll) dibuat menjadi suatu tab
8. Menu shop from category diurutkan A-Z
9. Nama toko diurutkan A-Z
10. Filter kategori dan brand diurutkan A-Z
11. Kuantitas produk dapat langsung diketik
12. Disediakan button delete untuk menghapus histori keranjang pembelian
13. Informasi produk yang dicheckout dapat diklik kembali
14. Adanya adjustment penambahan add note
15. Adanya feedback untuk memastikan note yang diberikan sudah cukup
16. Logo add note seharusnya tidak perlu ada logo tambah, cukup berupa logo note
17. Fitur (:) pada pemilihan pembayaran diganti menjadi ikon payment
18. Toko diurutkan berdasarkan tingkat seringnya pemakaian pengguna (minimarket,
supermarket dan specialty store)
19. Warna fitur searching dibuat lebih kontras
20. Adanya display konfirmasi order
21. Menambah merchat partner (ex: Superindo, Indogrosir,dll)
22. Kategori produk dibuat tetap
23. Diberikan keterangan terkait error yang terjadi
24. Diberikan informasi terkait meyakinkan konsumen bahwa barang yang diantar
berkualitas
25. Persentase pembayaran dalam opsi pembayaran dapat di adjust sesuai dengan
keinginan user
USABILITY TEST REPORT HAL. 02
IINTRODUCTION

INTRODUCTION
Penelitian ini dilakukan untuk mengukur
usabilitas fitur GoMart pada aplikasi Gojek. GoMart
merupakan bagian dari Gojek yang menyediakan
layanan belanja online untuk memenuhi kebutuhan
sehari-hari (belanja harian, belanja mingguan,
maupun belanja bulanan) dengan sejumlah pilihan
merchant partner.

Fitur GoMart dipilih untuk pengujian usabilitas

karena fitur tersebut masih memilki masalah
usabilitas yang melanggar prinsip usabilitas salah
satunya prinsip consistency and standards. Tujuan
dari penelitian ini yaitu melakukan identifikasi
masalah usabilitas guna memenuhi kebutuhan user
dan memberikan rekomendasi perbaikan untuk
meningkatkan effectiveness, eficiency, usefulness,
dan ease to use.

Tujuan dari penelitian ini yaitu melakukan

identifikasi masalah usabilitas guna memenuhi
kebutuhan user dan memberikan rekomendasi
perbaikan untuk meningkatkan effectiveness,
eficiency, usefulness, dan ease to use. Penelitian ini
termasuk formative evaluation karena dalam
usabilitas ini hanya melihat detail aspek pada fitur
GoMart untuk memberikan rekomendasi perbaikan.
USABILITY TEST REPORT HAL. 03
METHOD

METHODS
A. PARTICIPANTS

Karena dapat merepresentasikan

masalah pada semua kategori user.

NOVICE USER

Mengacu pada referensi Nielsen 3-5 orang

(Nielsen 1994), 80% masalah usabilitas dari program
atau tampilan dapat dievaluasi (Turner dkk 2006).

JUMLAH USER 6
Jumlah responden juga ditentukan berdasarkan hasil
ORANG
data skrinning yang memenuhi kriteria.

KARAKTERISTIK USER

Usia rata - rata : (M=24, SD=0,63) 4 Pria (M=24, SD=0.82) dan 2 Wanita
23 tahun (M=24, SD=0.0)
16.7%

25 tahun
16.7%

24 tahun
66.7%

Komunikatif Berpengalaman
berbelanja
online

Pengguna aplikasi Gojek Tidak pernah

menggunakan
GoMart
USABILITY TEST REPORT HAL. 04
METHOD

B. THINK ALOUD AND INTERVIEW

THINK ALOUD
Murah
Flexsible
Easy to Learn
Dapat dilakukan secara online

INTERVIEW
Dapat memahami pola pikir user

Melakukan evaluasi aplikasi

Flexsible
Melihat hal yang sulit dipahami user
Dapat dilakukan secara online

C. PROTOCOLS
Pengambilan data terbagi dalam 2 sesi. Sesi pertama yaitu metode Think
Aloud dengan melakukan 3 task dan sesi kedua yaitu Interview.
Sesi Think Aloud
Task 1: Berbelanja dengan fitur searching
User diminta untuk menentukan toko terdekat dan berbelanja 3
produk yang berada pada kategori milk & processed, office &
stationary, dan Automotive menggunakan fitur searching.

Task 2: Berbelanja dengan fitur filter

User diminta untuk melakukan pemilihan toko terdekat dan
berbelanja 3 produk menggunakan fitur filter berdasarkan
(kategori: brand): (fresh milk: milo), (battery: ABC) dan, (vehicle gear
& equipment: KIT).

Task 3: Berbelanja dengan fitur filter/searching sesuai

keinginan user
User diminta untuk melakukan pemilihan toko terdekat dan
berbelanja 3 produk menggunakan fitur filter berdasarkan
(kategori: brand): (fresh milk: milo), (battery: ABC) dan, (vehicle gear
& equipment: KIT).

Sesi Interview
Sesi interview terdiri dari 17 open ended question yang
berkaitan dengan permasalahan saat melakukan usability
testing.
USABILITY TEST REPORT HAL. 05
METHOD

PROSEDUR PENGAMBILAN DATA

1. User join pada Google Meeting 2. User wajib melakukan share screen
dengan 2 device yaitu handphone pada hp.
dan laptop.

3. User wajib melakukan on camera 4. Instruksi pelaksanaan task akan

dengan laptop sampai akhir test dibacakan oleh fasilitator, dan user
wajib mengikuti instruksi yang berikan

5. User melakukan Thinking Aloud pada 6. User diperbolehkan bertanya jikan

sesi 1 yang terdiri dari 3 task. Urutan task terdapat kesulitan saat melakukan task.
dilakukan secara random. User wajib
menyuarakan atas apa yang dipikirkan
ketika melakukan task berupa kata
umpatan, marah, hingga keluh kesah.

7. User melakukan Interview pada sesi 2 8. Fasilitator akan merekam semua

yang terdiri 17 open ended question dan percakapan selama proses
diharapkan dapat memberikan feedback pengambilan data berlangsung
secara sistematis dan terstruktur sesuai dengan menggunakan aplikasi
dengan pertanyaan yang diberikan. Camtasia.
USABILITY TEST REPORT HAL. 06
METHOD

WITHIN SUBJECT

Penelitian ini termasuk WITHIN SUBJECT karena

user melakukan beberapa task yang sama untuk
mendapatkan masalah usabilitas. Within Subject dipilih
karena lebih menghemat biaya, waktu, dan hasilnya lebih
konsisten.

Namun kelemahan pada

within subject yaitu adanya
bias karena terdapat learning factor dalam mengerjakan
task. Sehingga perlu dilakukan random task untuk
mengurangi learning faktor dari user di dalam
pengerjaan task tersebut.

Tabel 1. Random Task User

RANDOM TASK USER

Inisial Task
BY 2 1 3
THM 2 3 1
TIF 1 3 2
ZA 2 1 3
YD 1 3 2
FHD 3 1 2

USABILITY TEST REPORT HAL. 07

METHOD

DATA ANALYSIS

Hasil Hasil Pengumpulan

Thinking Aloud Interview Problem

A. Thinking Aloud
Data di dapatkan melalui observasi dari apa yang disuarakan user ketika
mengerjakan 3 task yang berbeda. Peneliti akan mengamati user selama
usability testing berlangsung dan membuat catatan terkait masalah yang dialami
user ketika mengerjakan task. Selanjutnya peneliti melakukan rekapitulasi dari
catatan yang telah dibuat dan memverifikasi kembali melalui video recorder
selama proses pengujian berlangsung. Proses verifikasi bertujuan untuk
memastikan bagian mana yang sulit dikerjakan oleh user.

B. Interview
Hasil rekapitulasi di konfirmasi kembali melalui sesi interview untuk setiap
user. Saat melakukan interview, fasilitator akan menggali lebih dalam terkait
critical problem yang dihadapi oleh user ketika mengerjakan task. Proses
interview diperlukan untuk memahami pola pikir dan mendapatkan
rekomendasi perbaikan berdasarkan sudut pandang user pada fitur GoMart.

C. Pengumpulan Problem Usabilitas

Hasil dari metode thinking aloud yang sudah dikonfirmasi dengan interview
pada setiap user selanjutnya dijadikan satu untuk menjadi list dalam masalah
usabilitas dari semua user selama mengerjakan task tersebut. Semua masalah
usabilitas yang sudah di list tersebut kemudian di kelompokan sesuai dengan
jenis task.
USABILITY TEST REPORT HAL. 08
METHOD

RESULTS
INDENTIFIKASI PROBLEM

1. Effective
Efektivitas fitur GoMart
didapatkan dari tingkat
keberhasilan yang dilakukan Ditunjukkan dari persentase
selama proses pengerjaan task tingkat keberhasilan user saat
berlangsung. mengerjakan task sebesar
88,89% , sedangkan tingkat
kegagalan user sebesar
Persentase kegagalan user terjadi pada task pemilihan 11,11%.
lokasi toko yang terdekat dari user, order confirmation,
dan pemilihan produk dengan fitur filter & searching.

Berikut kegagalan yang dialami user selama pengerjaan task di usability testing:

Kesulitan dalam menemukan toko Task memilih produk dengan fitur

terdekat, karena tidak adanya fitur
"sorting nearest store".
Fitur searching pada tampilan awal
GoMart tidak dilengkapi dengan fitur
searching berdasarkan toko, namun
yang tersedia hanya searching
berdasarkan produk.
filter dialami oleh 2 dari 6 user.
Produk tidak terfilter saat user
melakukan filtering brand.
Fitur filter tidak tersorting
berdasarkan abjad A-Z, sehingga
user sulit menemukan kategori dan
brand pada fitur filter.

Tidak adanya keyword produk untuk Display yang berwarna hijau hilang
membantu user melakukan input dan timbul, sehingga user kesulitan
nama produk. ketika mencari display tersebut
untuk ke order confirmation.
USABILITY TEST REPORT HAL. 09
METHOD

2. Efficiency
Efisiensi didapatkan dari seberapa cepat user
dalam menyelesaikan suatu task. Hasil
menunjukkan bahwa responden cenderung lebih
cepat menyelesaikan task dengan fitur searching
dibandingkan dengan fitur filter.

Hal tersebut terjadi karena terdapat beberapa

problem dalam fitur filter yang dapat menghambat
pengerjaan task:

Tidak terdapat fleksibilitas pemilihan

filter kategori karena hanya dapat
memfilter 1 kategori saja, sedangkan
pada fitur filter brand dapat
melakukan filter lebih dari 1 brand

Pelabelan nama kategori dan

brand pada fitur filter tidak di
shorting berdasarkan abjad
A-Z.

Display feedback yang diberikan

sistem tidak konsisten, filter kategori
menggunakan dot (bulat) dan pada
filter brand menggunakan dot
centang
USABILITY TEST REPORT HAL. 10
RESULT

3. Ease To Use

Berdasarkan 4 dari 6 user memilih untuk menggunakan

fitur searching ketika mencari suatu produk. Fitur
searching dipilih berdasarkan kemudahan yang
diberikan dalam menemukan produk. User hanya
diminta untuk melakukan input nama brand untuk
menemukan produk. Namun, disis kemudahannya fitur
searching masih terdapat beberapa kekurangan seperti:

Tidak adanya keterangan berupa keyword produk

untuk membantu user melakukan input nama
produk.
Warna pada fitur searching memiliki kemiripan
dengan backgroundnya, sehingga membuat user
kesulitan mendeteksi fitur tersebut.

4. Usefulness
Usefullness digunakan untuk menilai seberapa
berguna fitur GoMart pada aplikasi Gojek.
Berdasarkan hasil interview ditemukan beberapa
alasan mengapa fitur GoMart dirasa kurang berguna
bagi user:

Akses untuk berbelanja kebutuhan secara

langsung mudah ditemukan dan dekat dengan
rumah
Beberapa user yang tinggal di pedesaan tidak
dapat menggunakan aplikasi GoMart karena
area nya belum terjangkau
Harga barang yang lebih mahal dibanding
pembelian offline dan ongkos kirim yang relatif
tinggi
Kurang familiar dengan fitur GoMart
USABILITY TEST REPORT
RESULT
5. Rekomendasi Perbaikan
1. Memberikan notifikasi tentang customize
penyusunan layout pada fitur Gojek yang
dapat di custom sendiri oleh user bagi
pengguna baru aplikasi Gojek
3. Memberikan perbedaan ikon pada setiap
fitur kategori di GoMart sehingga dapat
mengurangi kebingungan pada user
ketika memilih suatu kategori
5. Display keranjang berwarna hijau
sebaiknya dibuat secara konsisten di satu
tempat, sehingga tidak hilang pada saat
user melakukan scroll down dan scroll up
HAL. 11
2. Memberikan fitur searching lokasi toko
terdekat, terlengkap, dan produk yang
dicari sehingga user dapat bereksplorasi
lebih jauh untuk mencari toko terdekat
melalui fitur searching.
4. Fitur searching sebaiknya diberikan
notifikasi keyword dari produk yang
sering digunakan oleh user lainnya
ketika user melakukan input produk
6. Fitur GoMart perlu dilengkapi dengan
ketersediaan stock guna memberikan
informasi dan ekspektasi kuantitas yang
perlu di checkout user
USABILITY TEST REPORT
RESULT
7. Informasi seperti promo dan best deal
of the week sebaiknya dibuat menjadi
suatu tab dalam GoMart untuk
memudahkan user mencari promo
terkini dan membuat tampilan GoMart
lebih simple.
9. Sebaiknya nama toko disorting A-Z guna
memudahkan user mencari toko yang
diinginkan.
11. Sebaiknya fitur kuantitas dapat diinput
manual tanpa harus melakukan input
satu per satu item yang diinginkan
dengan kuantitas yang banyak.
HAL. 12
8. Menu shop from category sebaiknya
di sort A-Z untuk mempermudah user
menemukan produk pada kategori yang
diinginkan
10. Pada filter kategori dan brand perlu
disorting A-Z, sehingga user dapat
mudah mendeteksi tujuannya.
12. Diperlukan fitur penghapusan secara
langsung untuk menghapus item yang
tidak jadi dibeli/history pemesanan tanpa
meminta user mengurangi satu per satu
secara manual
USABILITY TEST REPORT
RESULT HAL. 13

13. Sebaiknya informasi produk yang 14. Penambahan fitur notes yang
dicheckout dapat diklik kembali di atas nama sebelumnya hanya satu notes menjadi
atau gambar produknya untuk kembali ke beberapa macam notes yang terlihat
laman produk tersebut. dibawahnya yaitu menjadi dua notes

15. Diperlukan feedback untuk memastikan 16. Logo add note seharusnya tidak
note yang diberikan sudah cukup, perlu perlu ada logo tambah, cukup berupa
dilengkapi dengan feedback informasi yang
logo note
menyatakan bahwa apakah catatan sudah
cukup
USABILITY TEST REPORT
RESULT
17. Informasi untuk penggantian metode
pembayaran diganti bukan dari titik tiga
tetapi dari kata gopay atau cash yang bisa
di klik
19. Memberikan warna yang lebih contras
pada fitur searching untuk
memudahkan user mendeteksi fitur
tersebut.
HAL. 14
18 Pada tampilan pemilihan lokasi toko,
minimarket diletakan terlebih dahulu
sebelum supermarket dan specialty store
(berdasarkan tingkat seringnya pemakaian
pengguna).
20. Diberikan display konfirmasi apakah user
memang ingin
melakukan order
USABILITY TEST REPORT
RESULT HAL. 15

21. Menambah merchat partner agar
konsumen dapat melakukan
pembelanjaan dengan lebih banyak
pilihan seperti indogrosir atau
superindo
23. Jika muncul display error, sebaiknya
diberikan keterangan terkait error yang
terjadi.

25. Persentase pembayaran dalam opsi

pembayaran dapat di adjust sesuai
22. Kategori produk pada setiap toko dengan keinginan user
dibuat tetap dan tidak berubah
tempat.

24. Diberikan informasi terkait meyakinkan

konsumen bahwa barang yang diantar
merupakan produk yang mempunyai
kualitas bagus
USABILITY TEST REPORT
RESULT

DAFTAR PUSTAKA

Turner, C. W., Lewis, J. R., & Nielsen, J. 2006. "Determinin

usability test sample size." International encyclopedia of
ergonomics and human factors, 3(2), 3084-3088.

Glassman E., Guo P., Jackson D., et al., 2018. Heuristic

Evaluation. User Interface Design and Implementation.
http://web.mit.edu/6.813/www/sp18/classes/17-heuristic-
evaluation/. Online Access on 21 Aug 2021

Nielsen J., 1992. Finding Usability Problems Through Heuristic

Evaluation. Proceeding Of the SIGCHI Conference On
Human Factors in Computing System. Monterey. USA. 373-
380

Nielsen J., 1994. Heuristic Evaluation. In Nielsen, J. and Mack,

R.L (Eds.), Usability Inspection Methods. John Willey & Sons.
New York

Nielsen J., 1998. 10 Usability Heuristics for User Interface

Design. Nielsen Norman Group (NN/g).
https://www.nngroup.com/articles/ten-usability-heuristics/.
Online Access on 21 Aug 2021
USABILITY TEST REPORT
RESULT

LAMPIRAN

NO. USER COST KET.

1. FDW RP 30.000 GOPAY
2. YD RP 30.000 GOPAY
3. ZZ RP 30.000 GOPAY
4. THF RP 30.000 OVO
5. MB RP 30.000 GOPAY
6. TI RP 30.000 SHOPEE PAY