Developing

Attention-Aware and
Context-Aware User
Interfaces on
Handheld Devices
Oleh :

Lintang Setyo Kurniawati

16720251017
Pendahuluan

Dalam paper ini membahas dua aspek penting dari interaksi dengan perangkat
genggam (smartphone) yaitu context-awareness dan text entry. Dinama
mereka mengembangan penelitian yang terdahalu fokus khusus pada masa
lalu penelitian proyek-proyek yaitu WardInHand, Agamemnon dan past. Dalam
penelitian ini pengembangan yang dilakukan yaitu bagaimana smartphone daya
komputasi telah meningkat pada kecepatan tinggi.
Smartphone

• Ponsel yang berkemampuan canggih

• sistem operasi berfitur lengkap dan
Smartphone platform canggih untuk pengembangan
aplikasi.

• UMTS, GPRS, WiFi atau Bluetooth, GPS,

akselerometer, giroskop, kompas digital,

Sensor kedekatan dan sensor cahaya ambient.

• untuk mendukung pengguna dalam
berinteraksi dengan lingkungan eksternal
selain dari “virtual world”
Context aware applications

– interface persepsi, dijelaskan oleh Turki & Robertson (2000) Sebagai kemampuan untuk
menambahkan kemampuan perseptual seperti manusia ke sebuah aplikasi. Misalnya, sebuah aplikasi
mungkin menyadari apa yang pengguna katakan atau apa wajah pengguna, tubuh, dan tangan
mereka lakukan.
– Computer Vision-based interface, Disajikan oleh Turk (2004) sebagai mereka yang "melihat orang“
Dan bertujuan untuk menentukan fokus perhatian pengguna berdasarkan petunjuk visual.
– Attentive interfaces, yang, seperti yang ditunjukkan oleh Vertegaal (2003), bertujuan untuk
memahami apa yang pengguna mungkin tertarik pada waktu tertentu dan konteks dan menghasilkan
informasi yang relevan sesuai.
– Multimodal interfaces, yang mengintegrasikan, dengan cara yang homogen, mekanisme komunikasi
manusia yang berbeda seperti pidato, gerak tubuh dan mata dan gerakan tubuh. Gambaran disajikan
oleh Oviatt & Cohen (2000).
Design principles of a context aware
HCI
Dalam pengembangan HCI untuk berbagai aplikasi, termasuk sistem kontrol industri, otomatisasi sistem kekuasaan
dan telemedicine, ada kecenderungan untuk beralih dari solusi ad-hoc untuk layanan Web. Hal ini dilatarbelakangi
oleh portabilitas macam web browser yang menawarkan hampir semua antarmuka yang sama pada setiap sistem -
dari server yang kuat untuk perangkat genggam kecil. keuntungan utama dari web browser adalah:
• Tidak ada biaya, karena ketersediaan perangkat lunak gratis yang tersedia di semua platform;
• intuitif, seperti web browser yang terkenal oleh setiap pengguna komputer dan dengan demikian dapat dianggap
sebagai antarmuka yang universal;
• Skalabilitas dan portabilitas, sebagai browser yang tersedia untuk setiap arsitektur, dari superkomputer ke PC
desktop dan perangkat genggam.
• Buka arsitektur, seperti beberapa sistem terbuka dan standar yang tersedia (misalnya, Javascript, Java, HTML, XML
dll);
• Reusability, sebagai browser mengurangi risiko keusangan
WardInHand

WardInHand (disingkat WIH) adalah tiga tahun proyek IST Uni Eropa didanai (IST
10.479, 2000-2002), yang tujuannya adalah untuk mendukung kegiatan sehari-hari
dokter dan perawat di rumah sakit. WIH menyediakan alat untuk kolaborasi
workgroup dan akses di mana-mana untuk catatan klinis pasien di setiap
perawatan melalui penggunaan PC saku HP iPAQ.
Agamemnon and Past

Agamemnon adalah evolusi alami dari sebuah proyek yang sebelumnya bernama m
elewati (IST-1999-20805) 6 yang ditujukan untuk mendukung konteks dan lokasi
sadar kunjungan ke situs arkeologi. Demikian pula untuk Agamemnon, konsorsium
masa lalu termasuk tiga situs arkeologi, yakni Bibracte (Perancis), Toumba
(Yunani) dan Passo di Corvo (Italia). Pengunjung diberi PDA, yang dalam kasus
kita adalah HP iPAQ, dengan aplikasi yang membimbing mereka melalui situs.
Aplikasi berkomunikasi melalui nirkabel IEEE 802.11b jaringan dengan aplikasi
server yang melacak posisi pengunjung setiap saat untuk menampilkan konten yang
relevan dengan apa yang mereka sedang melihat. Seperti Agamemnon, aplikasi
menunjukkan jalan kunjungan berdasarkan preferensi pribadi.
Lanjutan....

Kami menjelajahi teknologi yang berbeda untuk menentukan lokasi pengunjung,

yaitu GPS, Triangulasi jarak antara pengunjung dan beberapa WiFi akses poin dan
perbandingan gambar yang diambil oleh PDA webcam dan dikenal profiles. Salah
satu aspek negatif dari masa lalu adalah penggunaan perangkat ad-hoc, seperti
PDA, dimiliki oleh situs arkeologi, bukan oleh pengunjung, seperti dalam kasus
Agamemnon. Sebagai hasilnya, situs arkeologi harus menanggung biaya sewa
perangkat. Keterangan lebih lanjut pada masa lalu yang disediakan oleh Ancona,
Dodero, Gianuzzi, Bocchini, Vezzoso, Traverso & Antonacci (2000).
Agamemnon in City: Context-
awareness without sensors
Salah satu titik-titik lemah Agamemnon adalah perlu menginstal aplikasi penuh
pada ponsel mobile pengunjung, dengan semua yang berarti dalam hal
kompatibilitas, bantuan pemeliharaan dan pengguna perangkat lunak.
Untuk alasan ini, kami menerapkan dan berhasil diuji ekstensi untuk Agamemnon
yang hanya membutuhkan ponsel kamera diaktifkan MMS untuk mendukung
pengguna dalam kunjungan mereka ke kota. Specifically lain, pengguna dapat
mengambil foto di Monumen dan mengirimkannya melalui pesan MMS untuk
aplikasi server apredefined yang mengakui Monumen dan mengirimkan kembali
beberapa informasi tentang hal itu.
Lanjutan ...
Heavy-client Vs. light-client

Agamemnon adalah sistem berat-client, di mana aplikasi klien menyediakan

antarmuka yang kaya dan fitur canggih. Dalam pandangan kami, perlu menginstal
aplikasi di telepon pengunjung adalah kelemahan yang melekat pada pendekatan
berat-client, seperti aplikasi mungkin tidak kompatibel dengan semua ponsel dan
beberapa versi perlu untuk dikembangkan untuk dijalankan pada platform yang
berbeda dan sistem operasi. Dengan kata lain, aplikasi menyiratkan biaya, yang
tergantung pada kompleksitas. Dalam kasus yang spesifik dari Agamemnon, bilur-
bilur dari ound beberapa masalah karena pilihan Java sebagai bahasa
pemrograman utama yang digunakan untuk mengembangkan aplikasi klien.
Lanjutan

Java, infact, menetapkan beberapa batasan tentang penanganan gambar resolusi tinggi,
yang merupakan masalah serius bagi sistem pengenalan gambar Agamemnon. Akhirnya,
kami menemukan bahwa aplikasi klien di Agamemnon terlalu menuntut dalam hal
interaksi yang diminta kepada pengguna. Oleh karena itu, pengguna akan menghabiskan
lebih banyak waktu melihat layar ponsel daripada menikmati kunjungan mereka. Dengan
kata lain, Agamemnon tidak menyediakan “antarmuka pengguna mata-bebas”, dalam
arti dijelaskan oleh Raman & Chen (2008). Pertimbangan ini adalah alasan untuk pilihan
kami untuk mengembangkan Agamemnon di Kota sebagai sistem thin-client, di mana
sebagian besar perhitungan dituntut untuk aplikasi server. Dalam Agamemnon di Kota
ponsel hanya perlu dilengkapi dengan kamera dan untuk dapat mengirim pesan MMS,
dua persyaratan yang dipenuhi oleh ponsel hampir semua ponsel di pasar saat ini.
Geolocation

Untuk alasan ini, menggunakan teknik geolocation lain disebut sel-ID, yang diskusi yang
menarik disediakan oleh Warrioretal. (2003). Pada dasarnya, sel-ID terdiri dalam menemukan
aphone berdasarkan sel yang telepon tersambung. Ketepatan lokasi diterima baik, karena
jari-jari daerah yang dicakup oleh sel UMTS adalah sekitar 100 meter. Dengan menggunakan
perangkat lunak bebas, kita memetakan landmark utama Genoa ke mengidentifikasi sel
UMTS meliputi daerah di mana mereka berada, seperti yang ditunjukkan pada Gambar 2.
Kami mencatat bahwa dengan menggunakan sel-ID kita tidak perlu hardware tambahan,
tetapi kita membutuhkan software sederhana yang menunjukkan di layar fi er
mengidentifikasi sel yang telepon tersambung. Jelas, sel-ID cocok di kota-kota, di mana land
mark sare biasanya spasial tersebar, tapi tidak berguna di situs arkeologi seperti yang di
Paestum dan Mycenae, karena mungkin ada lebih dari satu monumen dalam 100 m.
Lanjutan ....

Ada beberapa metode geolocation lainnya, yang gambaran disajikan pada Tabel 1.
GPS, Sel ID serta DGPS dan WAAS, yang tambahan dari GPS, bersifat global.
Pengujian

Kami menguji Agamemnon di kota, dan dengan geolocation, di Genoa oleh simulasi khas kunjungan wisata,

berkeliaran di jalan-jalan kota dan mengambil foto di 13 Landmark dipilih agar mereka diakui oleh sistem.
Untuk setiap landmark kami mengambil 100 foto dan diukur tingkat keberhasilan sebagai jumlah foto yang
landmark benar diakui; akurasi sistem adalah tingkat keberhasilan rata-rata atas semua Landmark. Hasil,
ditampilkan dalam tabel 2, dimana akurasi ini dilaporkan di baris terakhir, menunjukkan bahwa geolocation
jauh meningkatkan akurasi sistem, seperti yang diharapkan. Namun, kami menunjukkan lemahnya akurasi
sistem dengan keluar geolocation adalah karena beberapa monumen, seperti "Porta dei Vacca" dan
"University Library", yang tampaknya menyarankan bahwa kita gagal untuk melatih pengenalan gambar
dalam cara yang tepat. Selain itu, gambar pengakuan Agamemnon kota adalah sama seperti yang
dikembangkan untuk Agamemnon, yaitu specificaly yang dirancang untuk mengenali monumen di situs
arkeologi. Akhirnya, sementara Agamemnon telah selalu diuji dalam kondisi ideal, dengan monumen yang
jelas rintangan seperti keramaian, Agamemnon kota telah digunakan
di lingkungan perkotaan, dimana seringkali mobil mendapat di jalan antara kamera dan monumen.
Lanjutan ....
Text entry in handheld devices

Kita perhatikan bahwa Smartphone paling hari mungkin digunakan untuk menulis t
eks-teks yang panjang, seperti email, dokumen teks dan menyebar lembar,
sementara awal ponsel hanya dimaksudkan untuk panggilan telepon dan pesan
teks singkat, yang digabungkan dengan T9 keyboard kecil itu lebih dari cukup.
Hardware keyboards

Sampai beberapa tahun terakhir ponsel hampir semua dilengkapi dengan tombol 1
2 tombol, masing masing terkait dengan lebih dari satu karakter. Karena setiap
tombol ambigu, salah satu kebutuhan untuk tekan tombol berkali-kali untuk
memasukkan satu karakter
Virtual keyboards

virtual keyboard adalah software yang menampilkan gambar dari keyboard di layar 
yang dapat berinteraksi dengan menggunakan stylus kecil atau finger.
Keyboard virtual memiliki beberapa keunggulan dibandingkan dengan rekan-
rekan mereka hardware:
– Mereka tidak meningkatkan ukuran perangkat.
– Dua atau lebih keyboard virtual dapat diinstal dalam perangkat yang sama dan d
ipilih dari oleh pengguna.
– Mereka dapat berinteraksi dengan menggunakan stylus, yang independen dari 
ukuran fingers pengguna.
Lanjutan..
Qwerty
Komersial perangkat genggam menyediakan Qwerty virtual keyboard, pengguna bi
asanya berkenalan dengan itu. Namun, Qwerty dimaksudkan untuk digunakan
dengan dua tangan daripada stylus. Karena salah satu kebutuhan untuk
menggerakkan jarum atas keyboard untuk memilih karakter, jarak antara kunci
adalah menjadi isu penting dalam virtual keyboard. 
Lanjutan...
Fitaly
Fitaly adalah specifically virtual keyboard yang dioptimalkan untuk entriteks
berbasis pena 7. yang telah dirancang oleh Jean Ichbiah, lebih dikenal sebagai
penemu Ada, dan hari ini adalah commercialized dengan Textware, sebuah
perusahaan yang didirikan oleh Ichbiah sendiri.
Lanjutan....
Opti
Opti telah diperoleh oleh pertama menempatkan sepuluh Surat paling sering di key
board dan mengatur Surat-surat lain yang berdasarkan dwihuruf Inggris yang
paling sering. Sampai dengan empat tombol yang didedikasikan untuk karakter
ruang
Lanjutan...
Automatic generation of virtual
keyboards
– Keyboard tiga yang dijelaskan di atas telah dirancang oleh sidang-dan-
kesalahan, yang berarti bahwa pengaturan kunci yang berbeda telah mencoba sebelum memperole
h yang memuaskan. Kontinyu tata letak final hanya didasarkan pada penilaian perancang. Idealnya, 
satu akan perlu untuk mencoba semua kemungkinan layout untuk memilih yang terbaik. Namun, a
da berpotensi infinite cara mengatur kunci keyboard, dan keyboard itu
sendiri mungkin datang dalam bentuk lain dari sebuah persegi panjang. Jelas, kita tidak
bisa mengharapkan sebuah algoritma mampu menghasilkan semua mungkin layout keyboard; Mes
kipun demikian, itu dapat mencoba banyak lebih dari satu manusia dalam waktu jauh lebih
sedikit. Generasi keyboard layoutdapat dimodelkan sebagai masalah optimasi, dimana biasanya nila
i-nilai parameterbeberapa dapat secara
manual disetel untuk mendapatkan sebuah layout yang memenuhi beberapa kendala predefined.
Handwriting recognition systems

Sistem pengenalan tulisan tangan bertujuan mengubah teks tulisan
tangan ke bentuk digital, yang merupakan masalah sangat difficult mengingat bah
wa manusia diri mereka beberapa kali tidak dapat menafsirkan tulisan
tangan dari beberapa tubuh lain.
Lanjutan...
How online recognition works
Konsep penting dalam pengenalan online adalah bahwa stroke, yang mengacu pad
a setiap tanda yang dibuat dengan pena tanpa mengangkatnya. Informasi seperti k
ecepatan pena dalam setiap stroke, jumlah pukulan serta urutan dan arah masing-
masing digunakan untuk jauh meningkatkan akurasi atas pengakuan offline. 
Lanjutan.....
Shorthand writing
Dua kendala utama untuk pengembangan sistem pengenalan tulisan tangan yang
ideal adalah variabilitas dalam tulisan tangan dan segmentasi. Salah
satu cara untuk mengatasi kedua adalah untuk meminta pengguna untuk
berkolaborasi dan beradaptasi tulisan tangan mereka untuk mempermudah tugas
pengakuan. Ini adalah alasan singkatan menulis, dipelopori dalam domain
komputasi pena oleh Goldberg & Richardson (1993), yang diusulkan Unistroke . 
The WtX system

WtX menggunakan teknik Teks prediktif untuk memasukkan sebagian besar kata-
kata dengan menetapkan hanya beberapa huruf, maka kenyamanan ini memiliki
antarmuka yang sederhana, yang dapat digunakan dengan sedikit atau tidak
ada pelatihan, maka kemudahan penggunaan finally, menyediakan virtual
keyboard atau sistem pengenalan tulisan tangan, berdasarkan preferensipengguna,
maka flexibility.
Lanjutan..
The keyboard
Lebar daerah komposisi WtX adalah hanya setengah dari yang biasanya didedikasik
an untuk virtual keyboard, karena adanya daerah pemilihan. Akibatnya, Qwerty ad
alah bukan pilihan yang baik untuk WtX, karena orientasi lanskap.
Lanjutan.,..
The handwriting recognition system

Ukuran kecil komposisi sangat membatasi ukuran keyboard,
yang mungkin untuk membuat entri teks membosankan dan lambat. Untuk alasan i
ni kami termasuk dalam WtX sistem pengenalan tulisan
tangan yang didasarkan pada Graffiti, antarmuka yang terdiri dari hanya satu kotak 
kosong, dimana pengguna menulis karakter, dan beberapa tombol khusus, seperti 
ditunjukkan pada gambar 7 (b). Akibatnya, wilayah komposisi tidak terlihat seperti 
berantakan sebagai dengan virtual keyboard. 
Lanjutan...
The dictionary
Dalam versi WtX Kamus berisi kata-kata sekitar 14,000, masing-
masing terkait dengan frekuensi mereka penggunaan, berdasarkan Inggris Nasional
 Corpus, dibahas oleh lintah et al. (2001). Ukuran kecil Kamus adalah karena keterb
atasan memori perangkat yang WtX dikembangkan. Namun, pada rilis baru, teruta
ma untuk iPhone dan iPad, Kamus akan mencakup lebih kata-
kata. Dalam memori utama Kamus direpresentasikan sebagai sebuah trie, yang me
rupakan pohon berakar memerintahkan, mana tepi dicap dengan satu huruf dan se
tiap node mewakili string, diberikan oleh rangkaian dari huruf-
huruf di jalan dari akar ke node. Daun trie mewakili kata-kata Kamus.
Lanjutan....
The FTL rule
Tujuan dari teks prediksi adalah pada minimasi jumlah keran atau stroke yang diper
lukan untuk menyisipkan kata. Dalam kamus WtX panjang rata-rata kata,
ditimbangoleh frekuensi kata, adalah 4.4 karakter; kata-kata muncul di daerah
pemilihan setelah rata-rata 2,43 keran atau stroke. Untuk lebih lanjut mengurangi
jumlah rata-ratakeran stroke.
Dengan kata lain, aturan FTL bertindak sebagai filter kuat pada kamus, dengan me
milih, untuk diberikan tiga huruf berurutan, sejumlah kecil kata-kata, sehingga
meningkatkan kemungkinan bahwa kata muncul di daerah pemilihan setelah hanya
tiga keran, tidak peduli berapa lama kata.
Lanjutan...
Context-awareness
Satu penting aspek WtX adalah bahwa kita dirancang untuk menjadi konteks sadar,
yang, untuk yang terbaik dari pengetahuan kita, adalah hal yang baru untuk alat en
tri teks. Specifically lain, WtX dapat menangani beberapa kamus dan memilih kata-
kata dari salah satu yang lebih tepat untuk konteks pengguna saat ini.
Pertimbangkan contoh seorang dokter yang menggunakan WtX untuk baik
mengirimkan email ke teman-teman atau fill dalam catatan medis dari salah satu
pasiennya.
Experiments

Dalam percobaan dipilih 10 peserta dan diminta untuk menulis contoh teks dengan
454 dalam urutan WtX dengan virtual keyboard Qwerty, dan Wtx dengan Graffiti
dan FTL. Hasilnya dapat dilihat pada tabel. Seperti yang diharapkan peserta
menulis lebih cepat ketika menggunakan Qwerty, karena mereka akrab dengan itu.
Namun Akurasi rendah dan variasi kecepatan tinggi yang berarti rendah tingkat
kenyamanan. Dengan WtX, akurasi sangat membaik, sebagian kata-kata yang
dipilihsecara langsung dari kamus dan kenyamanan, meski tingginya jumlah kata-
kata yang salah eja karena graffiti, pengguna melaporkan merasa kurang bosan
ketika menggunakan WtX dengan FTL dan Graffiti