D.

Ada 3 langkah untuk menjalankan hand mouse interface (interface mouse yang menggunakan tangan)

1. merekonstruksi (penyusunan (penggambaran)kembali) dari gambar RGB kedalam gambar rangka dg

memakai teknologi Kinect SDK.

2. meng-ektrak (memperoleh) keistimewaan (karakteristik (nilai eigen)) fisik user menggunakan

informasi sendi gambar kerangka dan diwujudkan kedalam virtual monitor.

3. Menjlnkan setiap fungsi setelah memisahkan tangan kiri dan kanan.

-tangan kiri : gerakan mouse untuk mengubah koordinat yg dihasilkan pd virtual monitor ke koordinat
pd real monitor.

-tangan kanan : fungsi klik mouse dipastikan dg menggunakan informasi dari tangan kanan

Langka pertama adalah inisialisasi. Untuk membuat dan hand mouse interface, Kinect diinisialisasi, dan
gambar RGB diinput menggunakan Kinect (merekonstruksi kedlm gambar kerangka). Selanjutnya,
keistimewaan fisik diekstrak menggunakan informasi sendi gambar kerangka yg telah direkonstruksi. Lalu
dihasilkan kedlm virtual monitor. User juga dpt bergerak (berpindah) memakai hand-mouse interface.
Salah satu keistimewaan dibuatnya virtual monitor adalah lokasi user, dimana memungkinkan user untuk
berdiri dalam posisi apapun didepan kamera yg membuat user nyaman. Pergerakan user dicek
pembaruan virtual monitor (ditentukan apakah diperbarui /tdk). Akhirnya memungkinkan mengontrol
kursor mouse di real monitor melalui perintah yg sesuai dg tangan kanan dan kiri.

C.

Transformasi koordinat membntu user scra akurat untuk menyatakan posisi mouse dg gerakan tangan kiri
dan kursor mouse dpt dipindahkan keatas, bwh, kiri/kanan berpindah pd monitor nyata. V = isi dari
virtual monitor, R = isi dr real monitor, diatur untuk mengubah koordinat pd monitor nyata menggunakan
virtual monitor.

Penelitian ini menggunakan algoritma transformasi (untuk rasio virtual monitor dan monitor nyata). Kami
menggunakan resolusi monitor karena user memiliki ukuran monitor yg berbeda, dan ukuran monitor
virtual dpt dg mudah diperoleh karena monitor virtual dihasilkan dg fitur fisik (keistimewaan fisik).
Horizontal dan vertical rasio dikalikan dg rasio untuk koordinat tangan kiri pada monitor virtual.

B.

Tangan user akan dikenal oleh kamera sesaat setelah user ditempatkan mouse. Kemudian user memilih
menu sebuah menu virtual yg telah dibuat pada monitor nyata menggunakan tangan. Kami telah
merancang dan menerapkan hand mouse interface mengingatkan pada tindakan mouse yang paling
umum dan intuitif. Tindakan yg dilakukan user biasanya untuk mouse adalah meng klik dan berpindah.
Untuk mengontrol mouse scara simpelnya bergerak (tangan) dan menekan (tangan kiri) mouse. Dg hand-
mouse interface tangan user sangat mudah dan intuitif. Tangan kiri mengontrol pergerakan mouse dan
tangan kanan mengklik mouse. Jika tangan kanan bergerak pd monitor virtual, koordinat tangan kiri pd
monitor virtual dapat dikontrol dg mengkonvert koordinat kursor mouse pada monitor nyata. Lihat
menggerakan kursor mouse dg menggerakan tangan kiri dalam monitor virtual. Tangan kanan berfungsi
untuk klik. Gerakan tangan kanan untuk mengontrol fungsi klik pada monitor virtual, yg dpt dikenali dg
meregang dan menekuk tangan user dari posisi 1 ke posisi 2. Aktivitas tangan kanan telah dapat
dimengerti rasanya menyentuh layar sentuh dengan tangan kanan. fungsi klik dapat dikontrol secara
intuitif dan sederhana dg menggunakan informasi mendalam dari tangan kanan dan monitor virtual untuk
memastikan gerakn tangan kanan.

ketika user melakukan satu kali klik akan mengalami keterlambatan waktu 0,3
detik untuk menjalankannya. Konsep monitor virtual diperkenalkan untuk
mengatasi kelemahan ini. keistimewaan fisik user diperoleh dg menggunakan kamera
kinect, tp ini tdk akurat untuk dikonversi ke koordinat pada monitor nyata, karena
sedikit gerakan saja dr user maka kedalaman informasi dan koordinat data dg mdh
dpt berubah.
Monitor virtual diartikan sbg ruang virtual dimana kursor mouse dpt dikontrol
dg tangan diantara kinect dan user. Koordinat dlm ruang virtual mengirim
koordinat dg cpt pd monitor nyata secara akurat, dan membuat gerakan seperti pd
kursor mouse. Itu memungkinkan peningkatan akurasi dari fungsi mouse dan
membuatnya lbh intuitif, karena user dpt menggunakan monitor virtual secara
touch-screen.
Keistimewaan fisik user digunakan untuk membuat virtual monitor, karena setiap
keistimewaan fisik user itu berbeda setiap orgnya, termasuk tinggi badan dan
panjang lengan. monitor virtual hrs dibuat dg mencocokan ukuran dan tata letak
untuk setiap user dg mengekstrak keistimewaan fisik user untuk membuatnya jd
user-friendly. untuk mengekstrak keistimewaan fisik user digunakan kinect yg
bekerja secara real-time. gambar RGB diperoleh dg kinect SDK yg dpt
merekonstruksi gambar kerangka. koordinat dan kedalaman setiap sendi diperoleh
dg menggunakan gambar kerangka; fig 3 diperlihatkan informasi yg diperoleh dg
kinect SDK.
Sprti diperlihatkan pd fig 3. kinect dpt mengenali 20 sendi dari user.
keistimewaan fisik digunakan dalam sistem yg diusulkan termasuk panjang lengan,
lebar bahu, tulang belakang dan posisi kepala. tambahan, jarak antara user dan
kinect dianggap sbg keistimewaan fisik. keistimewaan fisik dan fungsinya dilihat pd
tabel 1.
monitor virtual dibuat menggunakan keistimewaan fisik; pada tabel 1, seperti
dilihat pd fig 4. ukuran dan posisi ketinggian dari monitor virtual berdsrkan lebar
bahu user (disbt alfa) dan jarak antara wajah user dan tulang belakang (disbt beta).
Ketika user menggunakan hand-mouse interfase (untuk selanjutnya kita sbt saja
HMI), jarak yg dpt dikendalikan oleh tangan diatur 2 kali lebar bahu dari user,
untuk menghindari ruang yang terlalu lebar atau terlalu sempit. Biasanya, jika bahu
dari monitor virtual diatur 2 kali lebar bahu karena panjang lengan user lbh bsr
drpd lebar bahu, user dpt mengontrol secara penuh jarak dari monitor virtual tanpa
bergrk/pindah. Sbg tambahan, ketika user mengangkat salah satu lengan, jarak
ketinggian dari monitor virtual ditetepkan diantara kepala dan tulang belakang, u/
mencegah dari terlalu tinggi atau terlalu rendah. jika ukuran monitor virtual diatur
menggunakan metode yg diajukan, HMI dpt digunakan dg membuat ukuran yg
sesuai dan ketinggian dari monitor virtual untuk setiap user, memungkinkan
digunakannya keistimewaan fisik yg berbeda.

B. blm beres
Tangan user dikenali dg kamera sesaat setelah user meletakkan mouse(mungkin
mouse disini diartikan sbg tangan). Lalu user memilih menu virtual yg telh dibuat
pd monitor real menggunakan tangannya. penelitian ini menggunakan metode
gestur.

tindakan yg diperlukan user untuk menggunakan mouse adalah memindahkan

mouse dan mengklik. tindakan yg mungkin mengingatkan mouse dpt di kontrol dg
bergerak (tangan kiri) dan menekan (tangan kiri) mouse. Dg menggunakan HMI
tangan user jd lbh mudah dan intuitif. tangan kiri mengontrol gerakan dari mouse,
dan tangan kanan mengendalikan fungsi klik pd mouse. jika tangan kiri bergerak
dlm monitor virtual, maka koordinat dari monitor virtual dpt dikendalikan dg
mengubah koordinat dari kursor mouse pd monitor real. fig 8 diperlihatkan
pergerkan dr kursor mouse dg gerakan dr tangan kiri dalam monitor virtual.
seperti yg dapt dilihat pad fig.8, karena gerkan dr kursor mouse dpt dikendalikan
dalam cara yg sama seperti gerakan tangan kiri pd monitor virtual, user dpt
menggerakan kursor mouse dg bnr ke posisi yg diinginkan pd monitor real. itu
memungkinkan memberikan user dg respon yg intuitif.
tangan kanan mengontrol fungsi klik pd mouse. seperti yg dilihat pd fig 9 gerakan
tangan kanan untuk mengontrol fungsi klik pd monitor virtual, dpt dikenali dg
meregang dan menekuk tangan kanan user dari posisi 1 ke posisi 2
C. Menentukan Koordinat dengan Algoritma Transformasi

untuk mengekspresikan gerakan kursor mouse pd monitor real itu berdasarkan

gerakan tangan kiri pada monitor virtual, itu diperlukan untuk keakuratan dalam
mengubah koordinat pd monitor real dg menggunakan koordinat tangan kiri pada
monitor virtual. ketepatan dalam mengubah koordinat membantu user untuk secara
akurat menyatakan posisi mouse dg gerakan tangan kiri, dan kursor mouse dpt
digerakan ke atas, bawah, kiri atau kanan untuk bergerak secara normal pd monitor
real. V = virtual monitor, R = real monitor, itu diatur untuk mengubah koordinat
pd monitor real dg menggunakan monitor virtual, sprti pd fig 10.
Pd penelitian ini digunakan rasio dari virtual monitor dan real monitor yg
mewakili algoritma transformasi. Kami menggunakan resolusi dari monitor karena
setiap user memiliki ukuran monitor yg berbeda, sehingga ukuran dari monitor
virtual dpat dg mudah diperoleh karena itu akan dihasilkan oleh keistimewaan fisik.
rasio horizontal dan vertikal merupakan perkalian dg rasio untuk koordinat tangan
kiri pd monitor virtual. koordinat algoritma tranformasi dpt ditulis dg persamaan
brkt.

D.

HMI yg diajukan dibagi menjadi 3 langkah. Langkah pd fi 11 akan dijlskan dibwh

ini :
1. merekonstruksi inputan gambar RGB menjd gambar kerangka dg menggunakan
kinect SDK.
2. mengekstrak keistimewaan fisik user dg menggunakan informasi sendi dari
gambar kerangka sehingga menciptakan sebuah monitor virtual.
3. melakukan setiap fungsi setelah membedakan tangan kiri dan kanan.
-tangan kiri: untk menggerakan mouse biasanya dg mengubah koordinat pd virtual
monitor yg telah dibuat menjdi koordinate pd monitor real.
-tangan kanan: berfungsi klik mouse yg tlh dikonfirmasi dg menggunakan informasi
yg mendalam dari tangan kanan.
 Langkah pertama adalah inisialisasi. untuk membuat dan menggunakan HMI
kinect diinisialisasi dan inputan gambar RGB dg menggunakan kinect akan
merekonstruksi menjadi gambar kerangka. P ada langkah selanjutnya, keistimewaan
fisik akan diektrak dg menggunakan informasi sendi yg tlh di rekonstruksi kedalam
gambar kerangka. kemudian akan dihasilkan virtual monitor. salah satu
keistimewaan yg digunakan untuk membuat monitor virtual adalah posisi dari user.
posisi dari user diperhitungkan untuk memberikan ukuran yg tepat, yg
memungkinkan user untuk berdiri dlm beberapa posisi didepan kamera sehingga
merasa lbh nyaman. dg demikian, gerakan dari user akan di cek dan menghasilkan
monitor virtual. Akhirnya, itu semua memungkinkan untuk mengontrol kursor
mouse pd monitor real dg perintah tangan kiri dan kanan.