marian webster online

Transcription

marian webster online
<APPOINT>
BiographIE - Informationsextraktion
aus biographischen Kontexten
Hauptseminar im Wintersemester 2009/2010
Dozenten: Prof. Franz Günthner, Michaela Geierhos
Vortrag am 14.01.2010, Referentin: Susann Mulzer
Aufgabenstellung
Thema: beruflicher Einstieg, Aufstieg, Wechsel
Erstellen einer lokalen Grammatik für „appoint“
Erweiterung des Lexikons der Organisationen
Erweiterung des Lexikons der Berufsbezeichnungen
14.01.2010
BiographIE - appoint
2
Lösungsansatz als Übersicht
mögliche JD
lokale Grammatik
Entwurfslexikon
PERL
Abgleich
Korrektur
Ergänzung
der Lexika
mögliche ORG
lokale Grammatik
14.01.2010
Lokale Grammatik
Korpusanalyse
Hauptgraph
Subgraphen für die
einzelnen Argumente
allgemeine Argumentstruktur
Kotextanalyse über
reguläre Ausdrücke
BiographIE - appoint
3
Mögliche Bedeutungen: appoint
„to fix or set officially“
"appoint." Merriam-Webster Online Dictionary. 2009. Merriam-Webster Online.
10. Dezember 2009 <http://www.merriam-webster.com/dictionary/appoint>.
„to name officially“
„to determine the disposition of (an estate) to someone
by virtue of a power of appointment“
„to provide with complete and usually appropriate or
elegant furnishings or equipment“
„to exercise a power of appointment“
14.01.2010
BiographIE - appoint
4
Mögliche Bedeutungen: appoint
„to fix or set officially“
"appoint." Merriam-Webster Online Dictionary. 2009. Merriam-Webster Online.
10. Dezember 2009 <http://www.merriam-webster.com/dictionary/appoint>.
„to name officially“
„to determine the disposition of (an estate) to someone by virtue of
a power of appointment“
„to provide with complete and usually appropriate or elegant
furnishings or equipment“
„to exercise a power of appointment“
14.01.2010
BiographIE - appoint
5
Das Korpus – Beispielsätze
PP appoint him administrative director (5){S}
<PERSON> <JD>
PP appoint him as head of the rabbinical academy
of pumbeditha (11){S}
<PERSON> as <JD> of the <ORG> of <GEO>
14.01.2010
BiographIE - appoint
6
Das Korpus – Beispielsätze
PP appoint 10 business and only 6 state and local
officials (11){S}
➔
business officials
➔
state officials
➔
local officials
14.01.2010
BiographIE - appoint
7
Das Korpus – Beispielsätze
✗
PP appoint this (3){S}
✗
PP appoint a 1997 schemers t-shirt day (7){S}
14.01.2010
BiographIE - appoint
8
Verfügbare Lexika
GEO
JD
in der Vorverarbeitung auf
Kleinschreibung normalisiert
14.01.2010
BiographIE - appoint
9
Verfügbare Lexika
ORG
ORGBEZ
in der Vorverarbeitung auf
Kleinschreibung normalisiert
14.01.2010
BiographIE - appoint
10
Verfügbare Lexika
ORGADJ
14.01.2010
SECTOR
BiographIE - appoint
11
Lokale Grammatik
Erstellen einer lokalen Grammatik für „appoint“
UNITEX 2.0
14.01.2010
BiographIE - appoint
12
Argumentstruktur von <appoint>
<appoint>
+
<PERSON>
<JD>
<DEPARTMENT> <COMPANY>
<PERSON>
<JD>
<COMPANY> <DEPARTMENT>
<PERSON>
<JD>
<COMPANY>
<PERSON>
<JD>
<DEPARTMENT>
<PERSON>
<JD>
<JD>
<JD>
<COMPANY>
<COMPANY>
14.01.2010
<JD>
<JD>
<DEPARTMENT>
<JD>
<COMPANY> <DEPARTMENT>
<JD>
<DEPARTMENT> <COMPANY>
BiographIE - appoint
13
Argumentstruktur von <appoint>
<appoint>
14.01.2010
<PERSON>
<JD>
<DEPARTMENT>
BiographIE - appoint
<COMPANY>
14
Argumentstruktur von <appoint>
weitere mögliche Argumente, Einschübe:
<DATE>
<appoint>
<PERSON>
<PERIOD>
<DURATION>
<NB>
<JD>
<DEPARTMENT>
<ADDITIONAL INFO RE. PERSON>
<COMPANY>
<REPLACEMENT INFO>
<ORGADJ>
14.01.2010
<GEO>
BiographIE - appoint
<APPOINTER>
15
Graphen – Subgraphen
Siehe auch: Geierhos 2007. Seite 71. Ein weiteres Beispiel
für einen Graphen zur Erkennung von Personennamen.
PERSON
14.01.2010
BiographIE - appoint
16
Graphen – Subgraphen
JD
14.01.2010
BiographIE - appoint
17
Graphen – Subgraphen
ORG
14.01.2010
BiographIE - appoint
18
Graphen – Subgraphen
DEPTMT
2. Subgraph
ohne
Präpositionen
für bestimmte
Kotexte
14.01.2010
BiographIE - appoint
19
Graphen – Subgraphen
GEO
DATE
14.01.2010
BiographIE - appoint
20
Graphen – Hauptgraph
14.01.2010
BiographIE - appoint
21
Ergebnisse






appoint<ARG type = JD><JD>professor</JD></ARG><ARG type = DPTSEC> of
<DPTSEC> music</DPTSEC></ARG><ARG type = ORG> at the<ORG> university
of notre dame</ORG></ARG>
appoint another<ARG type = JD><JD> governor</JD></ARG>
<ARG type = GEO> in<GEO> egypt</GEO></ARG>
appoint<ARG type = PERSON> her</ARG><ARG type = JD> as another
<JD> boss</JD></ARG><ARG type = DATE> that may</ARG>
appoint<ARG type = JD> my<JD> flunkey</JD></ARG>
<ARG type = JD> as federal<JD> prime minister</JD></ARG>
appoint<ARG type = PERSON> her</ARG> to be<ARG type = JD> the
<JD> director</JD></ARG> and witness to it , the herald and the interpreter
appoint<ARG type = PERSON> her</ARG><ARG type = JD> as the<JD>
head</JD></ARG><ARG type = GEO> of the<GEO> arkansas</GEO></ARG>
<ARG type = DPTSEC><DPTSEC> department of health</DPTSEC></ARG>
14.01.2010
BiographIE - appoint
22
Probleme

appoint<ARG type = PERSON> him</ARG><ARG type = JD>
the vice<JD> chancellor</JD></ARG><ARG type = GEO> of
the<GEO> university</GEO></ARG>
JD
GEO
14.01.2010
BiographIE - appoint
23
Probleme

appoint<ARG type = JD> as<JD> chairmen</JD></ARG> of his
president's commission to strengthen social security retired sen.
daniel patrick moynihan , d-n.y. , and richard parsons , co-chief
executive of aol time warner inc


14.01.2010
fehlende Einträge im Lexikon
fehlende syntaktische Strukturen
BiographIE - appoint
24
Lexikon
Erweiterung des Lexikons der Organisationen
Erweiterung des Lexikons der Berufsbezeichnungen
14.01.2010
BiographIE - appoint
25
Lexikon
Erweiterung des Lexikons der Organisationen
Erweiterung des Lexikons der Berufsbezeichnungen
14.01.2010
BiographIE - appoint
26
Lexikon der Organisationen
Nützliche Kontexte für das Erkennen neuer
Organisationen:

Angabe der Rechtsform / Art des Gewerbes

phraseneinleitende Präposition

Großschreibung? – „named entity“
14.01.2010
BiographIE - appoint
27
Lexikon der Organisationen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatik)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
28
Lexikon der Organisationen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatik)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon (PERL)

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
29
Lexikon der Organisationen
14.01.2010
BiographIE - appoint
30
Lexikon der Organisationen
AUSZUG
14.01.2010
BiographIE - appoint
31
Lexikon der Organisationen
richtig erkannt
...volvement in a racketeer payoff scandal
at<POT_ORG> nomura securities co
ltd</POT_ORG> (34){S} PP appoint vice...
...eing conducted by the new york law firm of
<POT_ORG> paul , weiss , rifkind , wharton and
garrison llp</POT_ORG>
14.01.2010
BiographIE - appoint
32
Lexikon der Organisationen
Fehlerquelle:
...ppoint various employees to do the work of
<POT_ORG> running the corporation
</POT_ORG> (12){S} PP appoint vario...
14.01.2010
BiographIE - appoint
33
Lexikon der Organisationen
Lösungsideen



genauere syntaktische Analyse von Oranisationsbezeichnungen und Erweiterung der lokalen Grammatik
[z. B. Klammerstrukturen: „BCG (Boston Consulting Group)“; ...]
Suche über Personennamen und Wörter, die nicht im Lexikon
stehen
aufeinander aufbauende lokale Grammatiken, um genauer zu
filtern, und Stopwörter, um ungewünschte Ergebnisse zu
entfernen
14.01.2010
BiographIE - appoint
34
Lexikon der Organisationen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatik)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
35
Lexikon der Organisationen
Entwurfslexikon
annotierter
Text
PERL
...
fehlerhafte Einträge
14.01.2010
techprom inc.,.org
texaco inc.,.org
texas commerce bank,.org
thai military bank plc,.org
BiographIE - appoint
next association,.org
new corporation,.org
36
Lexikon der Organisationen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatik)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
37
Lexikon der Organisationen

Vergleich: Entwurfslexikon und ORG.dic

manuelle Bearbeitung der verbleibenden Einträge
Ergebnis: Lexikoneinträge für
76 bisher noch nicht im Lexikon
vorhandene Organisationen
14.01.2010
BiographIE - appoint
38
Lexikon der Berufsbezeichnungen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatiken, Stopwortliste)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
39
Lexikon der Berufsbezeichnungen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatiken, Stopwortliste)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
40
Lexikon der Berufsbezeichnungen
Nützliche Kontexte für das Erkennen neuer
Berufsbezeichnungen:


linker Kontext:
 appoint (as)
rechter Kontext:
 Präpositionen (of, ...)
 Satzzeichen
 Relativpronomen
14.01.2010
BiographIE - appoint
41
Lexikon der Berufsbezeichnungen
14.01.2010
BiographIE - appoint
42
Lexikon der Berufsbezeichnungen
PERL
negativer
OUTPUT
2. Graph
OUTPUT
1. Graph
14.01.2010
BiographIE - appoint
43
Lexikon der Berufsbezeichnungen
Entwurfslexikon
negativer
OUTPUT
2. Graph
PERL
...
...
...
...
enthält noch zu
viele fehlerhafte
Einträge
14.01.2010
BiographIE - appoint
44
Lexikon der Berufsbezeichnungen
Vorgehensweise

Annotation möglicher Organisationen
(lokale Grammatiken, Stopwortliste)

Entwurfslexikon (PERL)

Abgleich mit bestehendem Lexikon (PERL)

Nachbearbeitung / Korrekturen
14.01.2010
BiographIE - appoint
TO DO
45
Literatur




Geierhos, Michaela: Grammatik der Menschenbezeichner in biographischen
Kontexten. Arbeiten zur Informations- und Sprachverarbeitung. Band 2.
Centrum für Informations- und Sprachverarbeitung. LMU München, 2007.
Mallchok, Friederike: Automatic Recognition of Organization Names in
English Business News. Dissertation, LMU München, 2004.
Paumier, Sébastian: UNITEX 2.0, User Manual. Université Paris-Est Marnela-Vallée. 2008. <http://igm.univ-mlv.fr/~unitex/UnitexManual2.0.pdf>
Merriam-Webster Online Dictionary. 2009. Merriam-Webster Online.
14.01.2010
BiographIE - appoint
46