Wrapper (Informationsextraktion)
aus Wikipedia, der freien Enzyklopädie
Als Wrapper bezeichnet man im Informatik-Teilbereich der Informationsextraktion eine Gruppe von speziellen Prozeduren zur automatischen Extrahierung von (semi-)strukturierten Daten aus einer bestimmten Datenquelle (Text). Dabei werden je nach Art der zu extrahierenden Datensätze unterschiedliche Wrapper benötigt. Im Zusammenhang mit Feature Subset Selection existieren zudem unterschiedliche Ansätze zur Auswahl einer optimalen Menge von Feature Subsets aus den Datensätzen.
Inhaltsverzeichnis |
[Bearbeiten] Allgemeines
Dieser Artikel oder Abschnitt weist folgende Lücken auf:
Hilf Wikipedia, indem du die fehlenden Informationen recherchierst und einfügst! |
[Bearbeiten] LR-Wrapper
Ein LR Wrapper besteht aus n abgrenzenden Paaren < li,ri >
repeat
- foreach < li,ri > ε < l1,r1 > , ..., < ln,rn > }
- finde das nächste li
- finde das nächste ri
- extrahiere den Text dazwischen und speichere ihn als i-ten Wert des Tupels
until keine weiteren li
Einschränkungen:
- Jedes li muss ein "echtes" Suffix des Textes vor jeder Instanz des Zielobjekts sein. Echt heißt, es muss vor jeder Instanz stehen und darf nirgendwo anders vorkommen. Ansonsten werden falsche Tupel extrahiert.
- Jedes ri muss ein Präfix des Textes nach jeder Instanz des Zielobjekts sein. Ansonsten wird die Extraktion vorzeitig abgebrochen.
Quelle: [1]
[Bearbeiten] Weitere Wrapper
- HLRT-Wrapper (Head-Left-Right-Tail-Wrappers)
- Lerne einen eigenen Begrenzer für den Kopf und das Ende eines Dokumentes. Vor dem Head und nach dem Tail werden alle Vorkommnisse von < li,ri > ignoriert.
- OCLR>- und HOCLRT-Wrapper
- Lerne für jedes Tupel ein eigenenes Begrenzungspaar.
- N-LR- und N-HLRT-Wrapper
- Erlaube mehrwertige und optionale Atrribute
Quelle: [1]
[Bearbeiten] Wrapper und FSS
Folgende einfache Möglichkeiten der Auswahl bestehen:
- Forward selection: Starte mit einer leeren Menge von Features und füge immer das Feature hinzu, dass die Accuracy am meisten erhöht bis die Accuracy nicht mehr deutlich zunimmt.
- Backward elimination: Starte mit allen Features und versuche ungeeignete zu entfernen
- Simple heuristic search: Füge ein Feature nach dem anderen hinzu, bis die Accuracy nicht mehr deutlich zunimmt
[Bearbeiten] Einschränkungen
- Keine Permutationen von Attributen möglich
- Die Begrenzungspaare sind evtl. nicht ausreichend zur Identifizierung von Texten
Um diese Probleme zu lösen, müssen andere Algorithmen zur Informationsextraktion verwendet werden. Etwa ein nicht-deterministischer, adaptiven Mealy-Automaten (z.B. SoftMealy[2]), der diese Einschränkungen nicht besitzt.
[Bearbeiten] Quellen
- ↑ a b Kushmerick Nicholas: "Wrapper Induction: Efficiency and Expressiveness", Artificial Intelligence 118 (2000), S. 15-68
- ↑ C.-N. Hsu, M.-T. Dung: Wrapping semistructured web pages with finite-state transducers. In: Proc. Conference on Automatic Learning and Discovery (CONALD-98), 1998.
[Bearbeiten] Literatur
- Chidlovskii, B.; Borghoff, U.; Chevalier, P.: Towards sophisticated wrapping of web-based information repositories. In: Proceedings of the Conference on Computer-Assisted Information Retrieval, 1997, S. 123-155
- Roth, M., and Schwartz, P.: Don’t scrap it, wrap it! In: Proceedings of the 22nd VLDB Conference, 1997, S. 266–275,