Komponen dan
2
Proses dalam NLP
Morfologi
Sintaksis
Semantik
Pragmatik
Discourse Knowledge
World Knowledge
Fonetik / Fonologi
Pengetahuan tentang
kata dan bentuknya
sehingga bisa Membanggakan
bangga (kata dasar)
dibedakan antara yang mem (awalan)
satu dengan yang lain kan (akhiran)
Sintaksis
Pengetahuan
tentang urutan kata Kalimat 🡪 S,P
dalam S🡪Determinan, kata
pembentukan benda
P🡪 Kata Kerja, Kata
kalimat
benda
Semantik
Mempelajari arti
suatu kata dan
bagaimana arti
kata-kata tersebut Contoh :
membentuk suatu Ayah datang
arti kata dari kalimat membawa
yang utuh buah tangan
Pragmatik
•Contoh:
Paman pulang (diucapkan dengan nada datar)
Paman pulang! (diucapkan dengan nada tinggi)
Paman pulang? (diucapkan dengan tempo cepat)
Discourse Knowledge
• Contoh:
Ibu pergi ke pasar. Ia membeli makanan di sana.
World Knowledge
2. Tokenisasi Kata
Setelah membagi dokumen menjadi beberapa kalimat, lalu
memecah kalimat menjadi kata atau token. Contoh:
“London is the capital and most populous city of England
and the United Kingdom.”
•Hal yang sama berlaku untuk kata kerja. Kita juga bisa
membuat lemmatisasi kata kerja dengan mencari
akarnya, bentuk tak terkonjugasi. Jadi, " I had
two ponies " menjadi " I [have] two [pony].“
•Lemmatisasi biasanya dilakukan dengan memiliki tabel
pencarian bentuk kata lemma berdasarkan bagian
ucapannya dan mungkin memiliki beberapa aturan
khusus untuk menangani kata yang belum pernah dilihat
sebelumnya.
Memahami cara membangun NLP (8)
Misal :
Nama Perusahaan
Sejumlah uang
Nama Peristiwa
Memahami cara membangun NLP (19)
9. Coreference Resolution
Pada titik ini, kita sudah memiliki representasi yang berguna dari
kalimat kita. Kita tahu bagian-bagian kata untuk setiap kata,
bagaimana kata-kata itu berhubungan satu sama lain, dan
kata-kata mana yang berbicara tentang entitas bernama.
Namun, kita masih memiliki satu masalah besar. Bahasa Inggris
penuh dengan kata ganti seperti he, she, dan it. Ini adalah yang
biasa digunakan daripada menuliskan nama berulang kali di
setiap kalimat. Manusia dapat melacak apa yang diwakili oleh
kata-kata ini berdasarkan konteksnya. Namun model NLP tidak
mengetahui arti kata ganti karena hanya memeriksa satu kalimat
dalam satu waktu.
Memahami cara membangun NLP (20)
6 Lain-lain
Information Retrieval
Siri berisi :
•Speech recognition
•Language analysis
•Dialog processing
•Text to speech
78
Kesimpulan (1)
Kesimpulan (2)
•Ada banyak aplikasi NLP di dunia digital dan daftar ini akan
tumbuh seiring bisnis dan industri merangkul dan melihat
nilainya. Sementara sentuhan manusia penting untuk
masalah komunikasi yang lebih rumit, NLP akan
meningkatkan kehidupan kita dengan mengelola dan
mengotomatiskan tugas-tugas yang lebih kecil terlebih
dahulu dan kemudian tugas-tugas yang rumit dengan inovasi
teknologi.
80
Kesimpulan (3)