Procesamiento del

Lenguaje Natural

Definiciones

Lenguaje Natural:
Lenguaje

usado por los humanos para comunicarse

entre s.
Suele tener amplsimos vocabularios y gramticas
muy complejas.
Adems el lenguaje natural est en continua
expansin y permite expresar una misma idea de
muchas formas.
Tratamiento del lenguaje natural

Comprensin
Generacin

Comprensin del LN

Gran dificultad debido a que el lenguaje es algo vivo:

expansin,modificacin,etc.

El lenguaje se modifica tanto en vocabulario como en sintaxis

Existencia de jergas locales, profesionales, por franjas de edad...

Ambigedad

Lxica: Entr en el banco. Se sent en el banco.

Polisemia: ambigedad de las palabras

Sintctica: Juan vio a Mara con unos prismticos.

A veces es imposible de solucionar

Semntica: Los nios compraron el libro de Peter Pan.

Referencial: El jamn est en el armario. Scalo. Cirralo.

Requiere mucho conocimiento: objetivos del hablante,

hiptesis,contexto... No es mera transmisin de palabras...

Definiciones
Procesamiento del Lenguaje Natural (PLN)
Rama de las ciencias de la computacin encargada
del diseo e implementacin de elementos de
software y hardware necesarios para el tratamiento
computacional del lenguaje natural.
Objetivo: comprensin del lenguaje humano por
parte de una mquina.

Procesamiento del Lenguaje

Natural - MODELOS

Racionalista N. Chomsky

Empirista Z. Harris

Procesamiento del Lenguaje

Natural - MODELOS

Racionalista

El conocimiento lingstico puede ser

fijado previamente y tambin
codificado
e incorporado como conocimiento inicial.

Empirista

Procesamiento del Lenguaje

Natural - MODELOS

Racionalista
Empirista
El conocimiento lingstico se puede
inferir a partir de la experiencia,
recogida a travs de corpus textuales
utilizando mecanismos como la
asociacin o la generalizacin.

Procesamiento del Lenguaje

Natural NIVELES DEL LENGUAJE
Diferentes niveles de conocimiento:
Lxico: vocabulario de una lengua.
Morfolgico: morfemas flexivos y derivativos.
Sintctico: relaciones establecidas entre las palabras para
formar unidades superiores, sintagmas y frases.
Semntico: significado de las frases segn los elementos

que la forman: sintagmas, palabras, morfemas.

Pragmtico y Discurso: relacin de las unidades
lingsticas con el contexto extralingstico.
Significado de prrafos, estructura del texto como fuente de
anlisis.

Proceso de Comprensin

Comprensin: proceso de correspondencia de una forma

de entrada a otra representacin ms til para una cierta
tarea
Suele requerir 4 fases:

Estas fases suelen tener lmites difusos

No todos los sistemas trabajan con las 4 fases necesariamente
Anlisis morfo-lxico

El texto se separa en unidades lxicas con significado (lexemas)

Pueden ser fragmentos de una palabra, una o varias palabras

Se obtienen los lexemas y morfemas gramaticales

Se les asignan una o varias categoras sintcticas (si ambigedad)

Anlisis sintctico

Se comprueba la correccin de una frase con respecto a las reglas

del lenguaje (gramtica)
Se convierte la secuencia (lineal) de unidades lxicas en estructuras
sintcticas (no lineales)

Proceso de Comprensin

Anlisis semntico

Se asigna significado a una frase

Correspondencia entre estructuras sintcticas y objetos del
dominio representados en algn lenguaje de representacin del
conocimiento

Se descartan las estructuras sintcticas para las que no pueda

hacerse esta correspondencia

Anlisis pragmtico

Hasta esta fase el anlisis se hace a nivel de frase. Aqu, pasan

a considerarse prrafos enteros o incluso textos de forma global
La mayora de los sistemas reales no la incluyen
Se resuelven las referencias relativas al contexto
(ambigedades referenciales, como por ej. referentes de un
pronombre) y se asigna significado global a un conjunto de
frases

Procesamiento del Lenguaje

Natural - RECUPERACIN INFORMACIN
Fenmenos del Lenguaje Natural

Variacin lingstica

Ambigedad lingstica

Procesamiento del Lenguaje

Natural AMBIGEDAD Y VARIACIN
Lxica

Luis dej el peridico en el banco.

Cuando estaba en el banco, abri el libro / fue a la ventanilla.
El barco localiz el banco y comunic su situacin.

Sintctica

El vendedor de peridicos del barrio.

Luis vio al nio con los prismticos.

Semntica

Luis dio un pastel a los nios.

- Uno para todos?
- Uno para cada uno?

Referencial

Ella le dijo que lo pusiera debajo.

Quin habl?
A quin?
Que pusiera qu?
Debajo de dnde?

Procesamiento del Lenguaje

Natural ORGANIZACIN DE UN SISTEMA

Procesamiento del Lenguaje

Natural ORGANIZACIN DE UN
SISTEMA

Aplicaciones prcticas
Traduccin de mquina
Acceso a base de datos.
Interpretacin de textos
Bsqueda y filtrado de informacin.
Entre otros

Bibliografa

Allan, James. 2000. Natural Language Processing for Information

Retrieval.

Baeza-Yates, Ricardo. 2004. Challenges in the Interaction of

Information Retrieval and Natural Language Processing.

Lewis, D. David, and Karen Sparck Jones. 1996. Natural language

processing for information retrieval.

Smeaton, A. F. 1995. Natural Language Processing & Information

Retrieval.

Strzalkowski, T. 1997. Natural Language Information Retrieval. :

Kluwer Academic Publishers.

Verdejo, Felisa, Julio Gonzalo, and Anselmo Peas. 1999. Course

Information Retrieval & Natural Language Processing (UNED).

Vilares Ferro, Jess. 2005. Aplicaciones del procesamiento del

lenguaje natural en la recuperacin de informacin en espaol. La
Corua: Universidad da Corua.