Bab 10

Temubual, Soalselidik dan Pandangan Pakar

1

Objektif

Peranan temubual dan soalselidik dalam penilaian Rekabentuk asas soalselidik Bagaimana melakukan temubual, penilaian heuristik dan cognitive walkthrough Bagaimana mengumpul, menganalisa dan mempersembahkan data Kelebihan dan kelemahan teknik-teknik ini
2

Temubual

Tidak berstruktur tidak berpandukan kepada skrip. Fleksibel dan meluas, tetapi tidak boleh direplika Berstruktur berdasarkan kepada skrip tertentu, mirip soalselidik. Boleh direplika tetapi tidka feksibel dan meluas Separa-berstruktur (semi-structured) berpandukan kepada skrip tetapi idea/isu menarik boleh dibincang lebih dalam.
3

Asas Temubual

Rangkakerja DECIDE Matlamat dan persoalan mempengaruhi temubual Dua jenis soalan:

soalan tertutup format jawapan yang telah ditentukan, spt. ya ata tidak soalan terbuka tidak mepunyai format tertentu

Soalan tertutp adalah lebih cepat dan mudah untuk dianalisa

4

Perkara yang perlu dielakkan semasa menyediakan soalan temubual

Soalan yang panjang Ayat majmuk pecahkan kepada dua Bahasa dan jargon yang mungkin tidak difahami oleh responden Soalan yang mempunyai andaian tertentu (leading questions) , cth: kenapa anda suka.? Bias yang tidak disedari, cthnya dari segi jantina
5

Komponen Temubual

Pengenalan memperkenalkan diri, menerangkan

matlamat temubual, yakinkan responden tentang isu etika, kebenaran untuk merekod, borang informed

consent form Warm up dimulakan dengan soalan yang mudah

dan menyenangkan

Utama - ajukan soalan menurut susunan logikal Cool-off period selitkan beberapa soalan mudah
untuk mengurangkan tekanan

Penutup terima kasih kepada responden

6

Proses Temubual

Gunakan rangkakerja DECIDE sebagai panduan Berpakaian mirip kepada peserta Semak peralatan rakaman lebih awal Wujudkan sistem kod nama tertentu untuk merahsiakan nama peserta

Be pleasant
Minta peserta mengisi borang perakuan pemberitahuan (informed consent form)
7

Probes dan Prompts

Probes (siasatan) digunakan untuk

mendapatkan maklumat lanjut, cth: ada apa-apa yang anda perlu tambah berkenaan hal ini? Prompts (galakan) digunakan untuk membantu peserta meneruskan ayat atau penerangan tertentu, cth: ya, teruskan, atau membantu mengingat nama Perlu pastikan bahawa kedua-dua di atas tidak menyebabkan bias
8

Temubual Berkumpulan

Juga dikenali sebagai kumpulan fokus Biasanya melibatkan 3-10 peserta Mengumpul maklumat dan pendapat yang pelbagai dan meluas Perlu ada pengurusan supaya:

Setiap peserta memberi sumbangan Perbincangan tidak didominasi oleh orang tertentu Topik agenda dibincangkan
9

Menganalisa Data Temubual

Bergantung kepada jenis temubual Temubual berstruktur boleh dianalisa sepertimana soalselidik Temubual tidak berstruktur menghasilkan data sepertimana yang dihasilkan oleh teknik pemerhatian participant observation Data dari temuduga tidak berstruktur perlu dianalisa dengan segera tuntuk mengenalpasti topik dan tema

10

Soalselidik

Soalan boleh terbuka atau tertutup Soalan tertutup paling mudah dianalisa, dan boleh dilakukan secara berkomputer Boleh diberikan kepada suatu populasi yang besar

Media penyebaran kertas, email dan laman web

Kelebihan soalselidik elektronik data masuk terus ke dalam pangkalan data, dan mudah dianalisa

Masalah soalselidik elektronik - persampelan iaitu saiz populasi tidak diketahui

11

Gaya Soalselidik

Pelbagai mengikut matlamat gunakan rangkakerja DECIDE Format soalselidik termasuk:

Pilihan ya , tidak Pilihan lebih dari satu Skala Likert Skala semantik Soalan terbuka

Skala Likert mempunyai julat titik tertentu Biasanya 3, 5, dan 7

12

Membangun Soalselidik

Menyatakan tujuan soalselidik dengan jelas dan menjamin anonymity responden Merancang soalan jika soalselidik berasaskan web, bangunkan secara off-line dahulu

Tentukan samada pernyataan adalah dalam bentuk posotif, negatif, atau gabungan
Soalan diuji terlebih dahulu (pilot test)

Tentukan bagaimana data akan dianalisa dan dapatkan nasihat ahli statistik jika perlu
13

Cara Mendapatkan Respon yang Baik

Pastikan tujuan kajian jelas Jamin anonymity Pastikan soalan direkabentuk dengan baik dan teliti Sediakan versi pendek untuk mereka yang tiada masa untuk mengisi versi panjang Buat follow-up dengan email, telefon, surat Sediakan insentif 40% renspon adalah agak tinggi, dan 20% biasanya boleh diterima
14

Kebaikan Soalselidik Online

Respon selalunya diterima dengan cepat Tiada kos penghantaran dan fotokopi Data boleh dikumpulkan ke dalam pangkalan data secara terus Masa yang diperlukan untuk analisa lebih singkat Kesilapan pada soalselidik boleh dibetlkan dengan cepat
15

Masalah Soalselidik Online

Persampelan adalah sukar jika saiz populasi tidak diketahui Sukar untuk mengesan atau mengelak dari seorang responden mengisi lebih dari sekali Terdapat kes di mana responden atau orang lain mengubah soalan dalam soalselidik melalui email
16

Analisis dan Persembahan Data

Persembahkan data dengan jelas jadual boleh membantu Gunakan statistik mudah spt: min, median, mod, sisihan piawai Peratusan juga baik, tetapi memerlukan saiz populasi Carta bar boleh menunjukkan data berkategori (nominal) Analisis statistik yang lebih terperinci boleh dilakukan jika perlu
17

Contoh-contoh Soalselidik

SUMI (Software Usability Measurement Inventory) MUMMS (Measuring the Usability of Multi-media System)

www.ucc.ie/hfrg/questionnaires

QUIS (Questionnaire for User Interface Satisfaction)

18

Pandangan Pakar

Pakar menggunakan pengetahuan mereka tentang pengguna dan teknologi untuk review kebolehgunaan perisian Kritik atau komen boleh dalam bentuk laporan formal dan tidak formal Penilaian heuristik suatu review yang berpandukan kepada suatu set heuristik

Walkthrough melibatkan pengalaman langkah-demi

langkah menggunakan senario terancang dan lakaran skrin
19

Penilaian Heuristik

Dibangunkan oleh Jacob Nielsen pad awal 1990-an Berdasarkan kepada heuristik yang diperolehi dari analisa empirikal ke atas 249 masalah kebolehgunaan Telahpun dikemaskini untuk teknologi sekarang, spt HOMERUN utk web Garispanduan rekabentuk menjadi asasuntuk membangunkan heuristik
20

Heuristik Nielsen

Keterlihatan (visibility) status sistem Padanan di antara sistem dengan dunia sebenar Kawalan dan kebebasan pengguna Ketekalan (consistency) dan piawaian Bantuan kepada penggun auntuk mengecam, diagnos, dan perbetulkan ralat Mengelak ralat Pengecaman (recognition) berbanding mengingat semula (recall) Kebolehlenturan (flexibility) dan keberkesanan (efficiency) penggunaan sistem Nilai estetik dan rekabentuk minimalist Bantuan dan dokumentasi

21

Penilaian Potongan (discount)

Penilaian heuristik juga dikenali sebagai penilaian potongan (discount evaluation) apabila hanya 5 penilai yang digunakan Kajian empirikal membuktikan bahawa secara kasar 5 penilai adalah cukup untuk mengesan 75-80% masalah kebolehgunaan
22

Tiga Fasa Penilaian Heuristik

Sesi briefing untuk memberitahu pakar/penilai tentang apa yang perlu dilakukan Fasa penilaian yang memakan masa 1-2 jam yang mana:

Setiap pakar/penilai berkerja secara berasingan

Pertama kali, gunakan sistem secara keseluruhan untuk membiasakan diri dengan sistem Kali kedua, tumpukan kepada ciri tertentu dalam sistem

Debriefing kesemua pakar/penilai berbincang untuk

kenalpasti masalah utama
23

Kelebihan dan Masalah

Beberapa isu etika dan praktikal perlu dipertimbangkan Mungkin sukar dan agak mahal untuk mendapatkan pakar Pakar yang baik mempunyai pengetahuan tentang domain aplikasi dan pengguna Masalah:

Masalah penting mungkin akan tertinggal Banyak masalah remeh yang akan dicamkan
24

Cognitive Walkthrough

Memfokus kepada mudah untuk dipelajari Perekabentuk akan menyentuh aspek dan penggunaan tertentu menggunakan senario Satu atau lebih pakar akan berjalan melalui rekabentuk prototaip (senario) Pakar diberitahu mengenai andaian tentang populasi pengguna, konteks penggunaan, dan perincian tugas Pakar dibantu oleh 3 soalan
25

Tiga Soalan
1.

Will the correct action be sufficiently evident to the user?

Adakah tindakan yang betul (sepatutnya dilakukan) akan kelihatan jelas kepada pengguna?

2.

Will the user notice that the correct action is available?

Adakah pengguna sedar akan kewujudan tindakan tersebut?

3.

Will the user associate and interpret the response from the action correctly?

Bolehkan pengguna memahami dengan betul akan hubungan di antara respon dari sistem dengan tindakan yang telah diambilnya?
26