21
2.5
Natural Language Processing
Kata-kata
tunggal
dian alisis ke
dalam
komp onenny a,
dan
token
non
kata, sep erti tanda baca, dip isahkan dar i kata-kata.
b. Analisis Sintaksis
Rangk aian
linear kata-kata diubah k e dalam struktur y ang menun jukkan
bahwa kata-kata salin g ber elasi satu sama
lain. B eberap a ran gkaian kata
mungk in ditolak
jik a
melan ggar aturan b ahasa
tentan g b agaimana
men gkombin asi
kata-kata.
M
isalny a,
sebuah
p
enganalisis
sintaksis
dalam
b
ahasa
In ggris
ak an
meno lak
kalimat
“Boy
the
go to
th e
to
store”.
c.
Analisis Semantik
Struktur
y
ang dibuat
oleh p enganalisis
sintaksis
menentukan
suatu arti.
Dengan
kata
lain,
p
emetaan
dibu at
antara
struktur
sintaksis
dan
objek
dalam
domain
tugas.
Struktur
y
ang
tidak
memiliki
p
emetaan
sep erti
demikian,
akan
mun gkin
ditolak.
M
isalny a,
kalimat
“Colorless
green
ideas sleep furiously” ak an ditolak sebagai
gan jil secara semantik.
d. Discourse Integration
Arti
dari
sebuah
kalimat
tunggal
mun gkin
tergantung
p
ada
kalimat
y
ang
mendahulu iny a dan
mungkin
memp engaruh i arti dari kalimat
y
ang men gikutiny a. M isalny a, kata “it” p ada kalimat
“John wanted it”,
bergantung p ada
konteks
p
ercakap an
sebelumny a,
sementara
kata
“John”
mun gkin
memp engaruh i
kalimat
sesudahny a
(sep erti
“He
always had”).
 |