Anda di halaman 1dari 31

Versuneextractionautomatique desvnementsdanslestextes

BatriceARNULPHYXavierTANNIERAnneVILNAT
{Beatrice.Arnulphy,Xavier.Tannier,Anne.Vilnat}@limsi.fr

Colloqueinternational Langage,discours,vnements 31mars,12avril2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

2/26

1. vnements
2. EntitsNommesvnement 3. Utilisationdelexiques 4. D'autresindicessuivre:
1. Indicateurstemporels 2. Verbes

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

3/26

Lesvnementsverbaux
DeVendler[1967]TimeML
Leverbeestporteurd'informationsquipermettentdecaractriserdes vnements:aspect,temps,etc. TimeML[Pustejovsky,2003]
Formalismed'annotationdesvnements But:extrairelesvnements(principalementverbaux),lesexpressions temporellesetlarelationentrelesdeux Annotationmanuelle/Extractionautomatiquesansrsultatstrs satisfaisants Corpusannots:
TimeBank(anglais) FR-TimeBank(franais) IT-TimeBank(italien)

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

4/26

vnementsverbauxvsnominaux
Verbes
Rleprincipaldereprsentationd'vnements(horsverbesd'tat)

Noms
Nonporteursdetouteslesinformationsvhiculesparleverbe Indiquerunvnement:pasunequalitunanimedunom Bipolaritdel'vnementialitdesnomsvnements

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

5/26

Lesvnementsnominaux
Intrtdtecterlesnomsvnements Lanominalisationdesvnementsestpriorilileurimportance. Exemple:ladnomination11septembre
Des bombes ont clates / Une explosion a retenti Des avions se sont crass dans le WTC Un attentat terroriste Les attaques du 11 septembre / Le 11 septembre

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

6/26

IntrtpourleTAL
Extractiond'information
Analysed'untexteensurfacedanslebutd'uneapplicationprcise

Exempled'uneapplicationpratique:projetChronolines(ANR)
Partenaires:MoDyCo,LIMSI,AFP,XRCE,Exalead Buts:
Ordonnerlesvnementssurunaxetemporel Proposer,danslachronologied'unthme,lesvnementslesplus importants

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

7/26

1. vnements 2. EntitsNommesvnement 3. Utilisationdelexiques 4. D'autresindicessuivre:


1. Indicateurstemporels 2. Verbes

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

8/26

Quaero
ProjetQuaero:projetderechercheeuropensur5ans
ILES:QuestionsRponses(3.5)etEntitsNommes(3.2) LatcheEntitsNommes
Dfinition : Entits nommes lments notables des textes, comme les noms de personnes et de lieux

Dtectiond'entitsnommesouconstitutionderessources(patronsou rglesd'extraction,modles,dictionnaires)enrapportaveclesentits nommes Reconnaissancedesdiffrentesmentionsd'unemmeentitdansun document("leprsident de la France"="Nicolas Sarkozy")

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

9/26

ReconnaissancedesEN
Dfinition : Entites nommes tendues [Grouin et al., 2011] Extension des entits nommes de nouveaux types (e.g. civilisations, les fonctions, etc.) Extension de la dfinition des entits nommes des expressions construites autour de noms communs : autorisation dinclusion d'expressions ne contenant aucun nom propre

LesENproprementparler
monorfrentialit(Enjalbert,Vicente); entitdumondeconcret(Ester); dfiniescommedesnomspropres(MUC7) Le festival de Cannes La seconde guerre mondiale

Lesdsignationsnominalesdesvnements
Le festival s'est droul en juillet. L'explosion d'un racteur nuclaire
Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

10/26

CompositiondesEN
Troispossibilits: 1.Desnomsdverbaux/drivsdeverbes
Le 21 juin, c'est la fte de la musique. L'adoption par le Parlement d'une loi [...]

2.Deslmentsquivoquentdesvnementsdefaon nonambige
le Festival du film de Berlin

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

11/26

CompositiondesEN
3.Desmotsquiprennentuncaractrevnementielen contexte
(polysmie) (mtonymie) (toponyme) (hmronyme)
La cinquime dition du salon de l'ducation L'organisation du procs dans les 60 jours Les frgates de Tawan s'invitent Lorient. Personne ne veut dun nouveau Tchernobyl. Copenhague se solde par un chec. Les indemnisations pour le 11 Septembre On pourrait assister un 21 avril l'envers.

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

12/26

QuelquesexemplesEN
Lesentitsuniques La Grande Guerre Cellesplusrcurrentes
Le festival de Cannes

L'instanciationdecesphnomnes
Les JO de 96

Lesvnementsplusanodins/flous
la descente de police de demain le branle-bas de combat mondial le dbat la dcision

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

13/26

Annotationmanuelledecorpus
Corpusjournalistique
LeMonde(20012002)+L'EstRpublicain
725nomsdiffrentset269nomsd'uneseuleoccurrence

Rpartition du corpus et des annotations

Guided'annotation
Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

14/26

Statistiquessurlecorpusannot
500 450

452

400

350

312

300

250

200

150

100

50

29
< 10% <20% <30% <40% <50% <60% <70% <80% <90% <100% tous

Progression du nombre de noms vnements par rapport au nombre d'occurrences total de noms vnements
Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

15/26

Statistiquessurlecorpusannot
500

disparition, meurtre, dmission


100% entre 70 et 99%

450

400

350

campagne, peine, vote


entre 40 et 69%

300

250

commentaire, signe, prescription, bombe


moins de 40%

200

150

prix, mort, conseil, triathlon ...

100

50

0 < 10% <20% <30% <40% <50% <60% <70% <80% <90% <100% tous

Progression du nombre de noms vnements par rapport au nombre d'occurrences total de noms vnements
Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

16/26

1. vnements 2. EntitsNommesvnement 3. Utilisationdelexiques 4. D'autresindicessuivre:


1. Indicateurstemporels 2. Verbes

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

17/26

Leslexiquesexistants
Lexiquedenomsdverbaux(nominalisationsdeverbes d'actionoudeprocs)
VerbAction[TanguyetHathout,2002]
9393couplesverbeslemme9200lemmesnominauxuniques
(action/vnement) (ambigus) sensibilisation, victimisation aration, talage, shampooing, voeu

LexiquecomplmentaireauVerbAction:nomsayantaumoins unefoisuneinterprtationvnementielle
Lexiquedesnomsvnementiels[Bittar,2010]
746nomsd'vnement
(non-dverbaux) (lexique spcifique) (ambigus) anniversaire, grve anticoagulothrapie apritif

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

18/26

Leslexiquesexistants
Deuxdifficults:
Ambigut: Lesdverbauxpeuventdsignerl'vnementoulersultat.
La construction du port a dur 50 ans. (vnement) Cette construction fait 150 mtres de haut. (rsultat)

Difficultmmepourl'annotateurhumain
L'talage de marchandise a t interdit sur le port. Soumettre/ prsenter une proposition de loi

Lesmotsautresquepolysmiquesquiprennentleurcaractre vnementielencontexte(toponymes,hmronymes,etc.)

Constat:leslexiquesseulsnesuffisentpas.
Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

19/26

1. vnements 2. EntitsNommesvnement 3. Utilisationdelexiques 4. D'autresindicessuivre:


1. Indicateurstemporels 2. Verbes

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

20/26

D'autresindicessuivre
Lesindicateurstemporels Lesverbes UtilisationdeXIP(XRCE):analyseursyntaxiquerobuste
Dpendancessyntaxiques Reconnaissanced'EN(personne,lieu,organisation)

Possibilitpourl'utilisateurd'implmentersespropresrglesde grammaireenplusdecellesexistantes

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices:Ind.Temporels

21/26

Lesindicateurstemporels(IT)
Ancrsdansletemps,lesvnementspeuventtreutilissavecdes
prpositionstemporelles,dansdescomplmentsdetemps.
lefaitquel'vnementseproduise
l'occasion de, lors de A Jrusalem , lors de la runion du gouvernement isralien

usagerfrentieldel'vnement
pendant, aprs, la veille de, le lendemain de La population a t vacue avant l'arrive de la lave.

unmomentdel'vnement
l'issue de, au commencement de les activistes qu'ils ont librs au dbut de l'Intifada.

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices:Verbes

22/26

Lesverbes(VB)
Lesverbesd'vnementetdecause/consquence
[Arnulphyetal.,2010] Desvnementscommeconsquenceoucaused'autres
Les crises ont pour origine des problmes de dfaillance technique. Cette lection entranera-t-elle la mise en sourdine des intrts communaux ? [...] a provoqu un toll chez les organisations amrindiennes.

Lesverbesquiintroduisentdesvnements
Le Salon de l'Agriculture est organis Porte de Versailles Les matches de huitimes et de quart de finale ont eu lieu devant plus de 5000 personnes. Le gnral, qui assistait une crmonie au ct du chef de l'tat, s'est dclar trs content de sa dcision.
Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

23/26

LesrglesXIP:VBetIT
LesrglessurlesITetlesVBpermettentdercuprerde nouveauxnomsd'vnementspotentiels.
mise en sourdine, toll depuis le couac de mardi, la presse japonaise s'est largement tendue sur les ngociations en cours. La priode ouverte par le 11 septembre signe la fin de cette hgmonie sur le monde. Mai 68 a prcipit sa disparition.

Rsultats obtenus au moyen des rgles XIP


Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

24/26

Rcapitulatifdestests

Rgles:prcision+,couvrance Lexiques:prcision,couvrance+ Combinaisondesdeux

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

1.vnements2.EntitsNommes3.Lexiques4.Indices

25/26

Perspectives
Dsambigusation
Avantd'intgrerdansunlexiquecesnouveausdclencheurset dsignationsd'vnements,ilfautpouvoirlesdsambiguser. Accorderunindicedeconfiancepourchaquemot/expression

Outilfonctionnel...

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

26/26

Merci!
Questions? Collaborations?

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

27/26

Tableauxenplus...
[Grimshaw,1990]Dtectiondel'vnementialit
Lesplurielsdesdverbauxsontdesvnements:
passignificatifpourlesnomsd'vnements(dverbauxetautres)

Forme singulier pluriel

Noms Tous les vnements noms 80,10% 83,40% 19,90% 16,60%

Taux de singuliers et de pluriels des noms

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

28/26

Tableauxenplus...
[Grimshaw,1990]Dtectiondel'vnementialit
L'articledfiniindiqueunvnement,lesdmonstratifsdesrsultats:
passignificatifpourlesnomsd'vnements(dverbauxetautres)

Noms Tous les Forme vnements noms article dfini 27,90% 19,90% article indfini 14,30% 6,20% dmonstratif 4,00% 1,70% possssif 6,10% 3,30% Taux d'vnement selon le type de dterminant Taux d'vnement selon le type de dterminant

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

29/26

Tableauxenplus...
Dtaildesoccurrences

IT VB90 VB90 + IT VB VB + IT

REF total 1841 1841 1841 1841 1841

HYP total Commun Prcision Rappel 138 112 81% 6% 25 21 84% 1% 163 133 82% 7% 85 58 68% 3% 223 170 76% 9% Rsultats obtenus au moyen des rgles XIP

F-mesure 0,11 0,02 0,13 0,06 0,16

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

30/26

tudedesvnements
Histoire,philosophieoujournalisme:
denombreusestudessurlanotiond'vnement

Linguistique:
vnementsnominaux:typologiesetdfinitions vnementsverbaux

Informatiquelinguistique:
descriptionetannotationdesvnementsdetypeverbal

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

31/26

Guide
Conseilsuivipourl'annotation:
Permutationdesmotsambigusavecdesmotsvnementsplussrs.
Preuve:formalit(nonvnement)ousurprise(vnement)
Les trente-sept journalistes franais attendus ici en sont , s'il en tait besoin , une preuve supplmentaire.

Lesitemsd'numrationssontsouvent(maispastoujours)dumme type. Lorsd'uneambiguttropdifficile,prfrernepasannoterlemot.

Versuneextractionautomatiquedesvnementsdanslestextes
Langage,discours,vnements2011

Anda mungkin juga menyukai