Gesture Recognition (GR)

Technology
Anggota Kelompok :
Asrifidianty (92213054)
Dessyre Natalia Dangeubun
(92213059)
Lisa Triana Putri (92213080)
Minik Rinayanti (92213081)
Mustika Aditya (92213085)
Nurul Hidayati (92213090)
Qurrota Aini (92213095)
Rita Eva Ompu Sunggu
(92213098)

Gesture Recognition?
Gesture Recognition is a technology that achieves
dynamic human-system interactions than do not reqire
physical, touch or contact based input mechanisme
Teknologi yang dapat menjangkau interaksi yang dinamis
dari sistem yang terdapat pada manusia dimana tidak
membutuhkan secara fisik, sentuhan atau hubungan
sebagai (mekanisme) input.
Tipe Gesture Recognition :
a. Hands
b. Full body

How The Recognition Process

Occurs?
The General Recognition Process

History

Left : 1919 The Theremin alat musik elektronik yang tidak

memerlukan sentuhan tetapi menerima gerakan pengguna
untuk membuat musik.
Right : 1970s - 1980s Videoplace digunakan sebagai
"pengolahan gambar real time dari video langsung" untuk
memungkinkan interaksi pengguna dengan tampilan
responsif.

1st Purpose Build GR

1993 ALIVE system, menggunakan komputer dan

video overlay yang memungkinkan pengguna dan
"agen virtual" untuk berinteraksi dalam ruang layar
yang sama.
(Maes, Darrell, Blumberg, & Pentland,1995)

1st Commercial Success

2003 The EyeToy, Sebuah

perangkat kamera 2D untuk
Sony Playstation 2 yang
menerjemahkan
"gerakan
tubuh ke dalam kontrol
permainan
(Marks, 2010)

Technology Overview
2D Gesture Recognition
Tidak membutuhkan kamera khusus atau sensor
Membutuhkan 3 langkah :
- Segmentasi
Memisahkan piksel sekitar area tangan atau badan dari
latar belakang
- Fitur Deteksi
Statistical - berdasarkan pusat persegi panjang setara
Contour - berdasarkan garis tangan atau badan pengguna
- Pengenalan Gestur
Directional (Kiri, Kanan, Atas, Bawah)
Action Based (Point, Reach, Grab, and Select)
Custom Libraries

Technology Overview
3D Gesture Recognition
Menggunakan
penyisipan
atau
perangkat
terpisah
berdasarkan kamera perangkat berbasis, proyektor, dan
sensor untuk merasakan tingkat kedalaman dan gerakan.
Gelombang Mikro (Microwave)
- Low power, 9-15 GHZ. Sekitar 2-3 cm panjang
gelombang
- Untuk pelacakan mata dan wajah
Light Waves
- Multi-camera Triangulation
- Laser (Object Tracking
& Scanning)
- Time of Flight (CW or Modulated IR)
- Structured Light (Grid or Pseudo Random IR)
Ultrasonic Waves
- Basic low resolution/Single Pass

Device

Microsoft Kinect Teardown, 2010

Architecture

Application Algorithm

Implementation of Algorithm

Kinect RGB and IR cameras, depth detection and skeleton

extraction

Implementation of Algorithm

Types Of Gesture
Gerakan Tangan (Most)
Gerakan Tubuh,
Gerakan jari tangan dan saat ini sudah
menggunakan sarung tangan yang
dipasang dengan microcontroller dan
berhubungan dengan alat menggunakan
wireless.
Gerakan kepala

User & Application

Pengguna : Semua umur dan difokuskan kepada para orang

tua dan orang yang memiliki keterbatasan.
Aplikasi :
Health Care
Education
Mobile Phones
Automotive
Robotics/Computer Vision
Home Media/ Appliance Interaction
Personal Computer Interaction
Interactive Vending, Signage and displays
Security/ identity Management
Motion Capture for graphics and Film Effects

Gesture Recognition Device

Video How the Kinect Depth

Sensor Works in 2 Minutes

Bibliography
http://www.incose-cc.org/http:/
www.incose-cc.org/images/2012_01_18_Gesture-Re
cognition.pdf
http://
www.jurnalteknologi.utm.my/index.php/jurnaltekno
logi/article/viewFile/2909/2177
http://
www.glyndwr.ac.uk/computing/research/pubs/sein
_bp.pdf
https://www.youtube.com/watch?v=uq9SEJxZiUg
https
://www.youtube.com/watch?v=bRgEdqDiOuQ&fea
ture=youtu.be&t=10m16s