Machine Translated by Google

Machine Translated by Google

Apa itu Multimedia?

• Multi: lebih dari satu

• Sedang (tunggal): tengah, perantara, rata-rata
• Media (jamak): sarana untuk menyampaikan informasi

- Media dalam konteks pers, surat kabar, radio dan TV - media media
- Media komunikasi: kabel, satelit, jaringan - transmisi massa
- Media dalam penyimpanan komputer: floppy, CD, DVD, HD, USB - media media
- Media dalam konteks HCI: teks, gambar, audio, video, CG - interaksi penyimpanan

• Multimedia: mengacu pada berbagai bentuk informasi teks, gambar, audio, video,
grafis, dan animasi di berbagai lingkungan aplikasi

Multimedia … :
produk, aplikasi, teknologi, platform, papan, perangkat, jaringan
komputer, sistem, ruang kelas, sekolah, …
Kata “multimedia” secara luas digunakan untuk mengartikan banyak hal yang berbeda
Machine Translated by Google

Apa itu Multimedia dalam hal Komputasi

Komputasi: Teknologi dan aplikasi berbasis komputer

Komputer apa? Berbagai bentuk komputer/perangkat!
Dalam hal komputasi, empat atribut multimedia mendasar:
-
Didigitalkan: Semua media termasuk audio/video disajikan dalam format digital
- Didistribusikan
: Informasi yang disampaikan jarak jauh, baik pra-produksi dan disimpan
atau diproduksi secara realtime, didistribusikan melalui jaringan
- Interaktif:
Dimungkinkan untuk memengaruhi informasi yang diterima, dan mengirim
informasi sendiri, dengan cara yang tidak sepele selain mulai, berhenti, maju cepat
-
Terintegrasi : Media diperlakukan dengan cara yang seragam, disajikan secara
diatur, tetapi dimungkinkan untuk memanipulasi secara mandiri

Definisi Multimedia:
Teknik berbasis komputer teks, gambar, audio, video, grafik, animasi, dan media lainnya
di mana setiap jenis informasi dapat diwakili, diproses, disimpan, dikirim, diproduksi dan
disajikan secara digital.
Fokus kursus ini Audio dan Video
Machine Translated by Google

Manfaat Multimedia
Beberapa penulis mengklaim bahwa manusia mendapatkan informasi mereka dengan cara berikut:

• lebih dari 80% melalui penglihatan - 20% di antaranya diingat • 11% melalui
pendengaran - 30% di antaranya diingat • 3,5% melalui penciuman • 1,5%
melalui sentuhan dan rasa.

... dimana 50% dari apa yang dilihat dan didengar diingat ... selanjutnya 80% dari
apa yang dilihat, didengar dan dilakukan, diingat

Artinya, banyak, media, dan interaktif harus menjadi hal yang baik
Machine Translated by Google

Klasifikasi Multimedia
• Teks - ASCII/Unicode, HTML, Postscript, PDF
• Audio – Suara, musik, ucapan, audio terstruktur (misalnya
MIDI) • Gambar Diam - Faksimili, foto, gambar pindaian •
Video (Gambar Bergerak) – Film, urutan gambar • Grafik –
Gambar yang dihasilkan komputer • Animasi – Urutan gambar
grafik

• Media Diskrit (DM, Statis): teks, gambar, grafik •

Media Kontinu (CM, Dinamis): audio, video, animasi

• Media yang Diambil vs Media yang

Disintesis • Media yang Berdiri Sendiri vs Berjejaring
Machine Translated by Google

Implikasi Sistem Multimedia

Multimedia memberlakukan persyaratan baru pada semua bagian arsitektur sistem:
• Representasi
- digitalisasi dan pengkodean (kompresi)
•
Penyimpanan - database, volume lebih besar, dan pola akses
baru • Pemrosesan
- OS, penjadwalan, pengindeksan, pencarian
• Pemahaman -
pengenalan ucapan/objek, analisis isi • Produksi

- perangkat lunak authoring dan antarmuka pengguna yang lebih

kompleks • Presentasi
- Persepsi pengguna, ramah pengguna di HCI (Human Computer Interface)
• Perlindungan
– enkripsi media, hak cipta, privasi
• Distribusi
- pengiriman dan siaran media
• Komunikasi -
transmisi media melalui jaringan/internet, kontrol sesi
Machine Translated by Google

Mengapa Multimedia Penting?

• Audio/video digital merevolusi musik, film, game, dan video &

industri audio

• Konvergensi komputer, telekomunikasi, radio, dan TV

– Disebabkan oleh teknologi dan persaingan
– Perubahan dramatis dalam produk dan infrastruktur
• Potensi aplikasi baru
– Potensi pasar yang besar
– Memperbaiki kehidupan kita (belajar, hiburan, dan pekerjaan)
• Masalah teknis yang menarik

Multimedia telah menjadi panas dan muncul di CS/IT sejak 1985

Machine Translated by Google

Kekuatan Mendorong Revolusi Multimedia

• Evolusi jaringan komunikasi dan data: Meningkatkan ketersediaan

bandwidth sesuai permintaan di kantor, rumah, jalan.... Berkat
modem data berkecepatan tinggi, modem kabel, sistem serat-coax
hybrid, xDSL, nirkabel.

• Akses di mana-mana ke jaringan. Melalui jaringan area lokal (LAN),

jaringan kabel dan nirkabel, Internet, world wide web, "di mana saja,
kapan saja".

• Prosesor cepat dan perangkat penyimpanan berkapasitas besar,

termasuk perangkat keras 3-D. Hukum Moore: komputasi dan
kapasitas memori chip berlipat ganda setiap 18 bulan atau lebih.
Machine Translated by Google

Kekuatan Mendorong Revolusi Multimedia (Lanjutan…)

• Algoritma dan struktur data baru. Teknik kompresi ,

grafik, visi komputer, pemahaman ucapan ...

• Terminal pintar seperti telepon digital, telepon layar,

PC multimedia, web-TV, asisten digital pribadi, dll.,
mengakses dan berinteraksi jaringan dengan koneksi kabel
dan nirkabel.

• Dan yang paling penting, digitalisasi hampir semua perangkat:

kamera, perangkat perekam dan pemutaran video, terminal
tulisan tangan, pengambilan suara, dll., bersama dengan
standar plug-and-play; dan digitalisasi teks/audio/video dokumen
dan perpustakaan yang memungkinkan komunikasi yang lebih
baik, penyimpanan, dan akses cepat dan browsing.
Machine Translated by Google

Aspek Teknologi
• Teknik untuk mengompresi dan mengkodekan berbagai media: model,
algoritma, bentuk, standar, dll.
• Aspek komunikasi: teknik download dan streaming,
sinkronisasi, pelapisan sinyal, masalah yang terlibat dalam definisi QoS
(kualitas layanan.)
• Teknik untuk mengakses sinyal multimedia dengan menyediakan alat yang
mencocokkan pengguna dengan mesin: pertanyaan bahasa lisan "alami",
alat konversi media, dan antarmuka pengguna multimodal (pengenalan
ucapan, membaca bibir, pelacakan wajah, OCR,..), agen yang memantau
sesi multimedia dan memberikan bantuan di semua fase akses dan pemanfaatan.
• Teknik untuk mengatur, menyimpan dan mengambil multimedia, untuk
mencari dan menelusuri dokumen dan perpustakaan multimedia individu.
Machine Translated by Google

Apakah Aplikasi Multimedia Sulit?

• Objek multimedia berukuran besar

– Ucapan: 8000 sampel/dtk – 8 Kbytes/dtk
– Audio CD: 44.100 sampel/dtk, 2 byte/sampel,
audio stereo – 176 Kbyte/dtk
– Video NTSC: 30 frame/dtk, 640x480 piksel, 3 byte/piksel – 30
Mbytes/dtk (terlalu besar, 2-8 Mbit/dtk jika dikompresi)

– Lebih banyak penyimpanan diperlukan

– Lebih banyak memori utama

– Penyimpanan sekunder 10-30 GB
– Penyimpanan tersier TB •

Persyaratan kinerja waktu nyata

Machine Translated by Google

Apakah Aplikasi Multimedia Sulit? (Lanjutan…)

• Kecepatan data lebih tinggi

– Subsistem I/O cepat (SCSI, saluran serat, HIPPI)
• Misalnya, Ultra SCSI2 – 80 Mbytes/dtk
– Backplane berkecepatan tinggi (PCI atau lebih cepat)
– Jaringan lebih cepat (1-25Mbs per aliran video)
• Jaringan 1-4 Gbit/dtk
• CODEC Perangkat Keras, CPU yang dimodifikasi (?), dan subsistem buffer/
grafik bingkai yang dimodifikasi

Pada dasarnya, perangkat keras dan baru perangkat lunak

Selanjutnya, pemrosesan "konten" audio/gambar/video

Machine Translated by Google

Contoh Aplikasi Multimedia

• Layanan perumahan • Ilmu pengetahuan dan teknologi

– Video Sesuai Permintaan – Lingkungan virtual

– Telepon video, – Visualisasi ilmiah, pembuatan

konferensi A/V prototipe • Hiburan

– Belanja di rumah •
Layanan bisnis - Permainan
– TV Interaktif
– Pendidikan perusahaan
- Bisnis elektronik – Pasca produksi film
• Pendidikan dan musik

– Perpustakaan digital • Kedokteran, aplikasi Web, dll.

- Pembelajaran jarak jauh
Machine Translated by Google
Machine Translated by Google
Machine Translated by Google
Machine Translated by Google
Machine Translated by Google
Machine Translated by Google

Perpustakaan Digital

Pembuatan Perpustakaan Eksplorasi Perpustakaan

Offline On line

Video audio Teks

Kompresi Digital
Lisan
semantik
Alami
Bahasa Ekspansi
Pidato Gambar Bahasa Alami Pertanyaan
Pengakuan Ekstraksi Penafsiran
Cerita Diminta
Segmentasi Pilihan Segmen

Basis Data Terindeks Basis Data Terindeks

Terindeks tersegmentasi Terindeks tersegmentasi
Salinan Terkompresi DISTRIBUSI Salinan Terkompresi
Audio/Video Audio/Video
UNTUK PENGGUNA
Machine Translated by Google

Rencana Pengajaran

Bagian I: Dasar-dasar Multimedia dan Teknik Pengkodean

Pelajaran 1. Konsep dan Topik Multimedia Pelajaran 2. Dasar-

Dasar Audio Pelajaran 3. Pengkodean Audio dan Pelajaran

Standar 4. Dasar-Dasar Gambar/Video Pelajaran 5.

Pengodean Gambar/Video: JPEG dan H.26x Pelajaran 6.
Standar Pengkodean MPEG

Pelajaran 7. Tinjauan Pengodean MM Tingkat Lanjut

Quiz Test I. Soal-soal yang berhubungan dengan Bagian I

Laporan I. Ringkasan Pengodean Audio dan Video, atau Studi tentang

Teknik Pengkodean Tertentu
Machine Translated by Google

Rencana Pengajaran

Bagian II: Teknologi dan Aplikasi Multimedia

Pelajaran 8. Pelajaran Produksi Objek
Media 9. Pelajaran Integrasi dan Penyajian
Media 10. Pelajaran Perlindungan Media 11.
Pelajaran Pengambilan Media 12. Distribusi
Media Melalui Internet Pelajaran 13. Komunikasi
Media - IP Telephony & Teleconference Pelajaran 14. Layanan
Multimedia Seluler melalui Jaringan Nirkabel

Laporan II. Ringkasan Teknologi Multimedia, atau

Studi tentang Teknologi Multimedia Tertentu

Tes Kuis II. Pertanyaan terkait Bagian II