Natural language processing

Natural language processing

In der Computerlinguistik wird untersucht, wie natürliche Sprache mit Hilfe des Computers algorithmisch verarbeitet werden kann. Sie ist Teilbereich der Künstlichen Intelligenz und gleichzeitig Schnittstelle zwischen Sprachwissenschaft und Informatik. Als Studiengang wird sie auch als Linguistische Datenverarbeitung bezeichnet.

Hauptmotivation sind dabei folgende zwei Bestrebungen:

  1. Die Unterstützung der sprachwissenschaftlichen Forschung durch den Einsatz von Computern. Das geschieht z. B. durch die automatische Analyse großer Korpora, um sprachliche Phänomene zu untersuchen oder die Gültigkeit von Theorien zu prüfen.
  2. Die Entwicklung sprachverarbeitender Systeme, z. B. für die maschinelle Übersetzung, automatische Textzusammenfassung, Extraktion von Informationen aus Texten, natürlichsprachige Interaktion mit Maschinen usw. Es steht hierbei also mehr die Anwendung im Vordergrund.

Inhaltsverzeichnis

Anwendungen in der Praxis

Die praktische Aufgabe der Computerlinguistik besteht darin, Computerprogramme zu entwickeln, die bestimmte, an Sprache geknüpfte Leistungen erbringen. Dazu gehören zum Beispiel:

  • Die Unterstützung des Computerbenutzers bei der Textverarbeitung, beispielsweise Korrektur von Tipp- und Rechtschreibfehlern, Prüfung auf grammatische Richtigkeit, Umwandlung in Bedeutungszeichen in Japanisch oder Chinesisch.
  • Die automatische Suche nach Textstellen, und zwar nicht nur ihrer Form, sondern ihrer Bedeutung nach (Information Retrieval und Suchmaschinen).
  • Die Unterstützung beim Übersetzen von Texten in eine andere Sprache (CAT, Computer Aided Translation) oder auch die vollständige automatische Übersetzung.
  • Die Verarbeitung von gesprochener Sprache (Spracherkennung und Sprachsynthese), zum Beispiel bei telefonischen Auskunftsdiensten oder Lesegeräten für Blinde.
  • Die Auffindung von Information in großem Stil, von Literaturangaben bis hin zu direkter Beantwortung von Fragen auf der Basis großer Datenbanken (Information Retrieval, Data-Mining, Informationsextraktion).
  • Die Aufbereitung von sprachlich vorliegenden Daten, beispielsweise die Verschlagwortung von Literatur, die Anfertigung von Registern und Inhaltsverzeichnissen, die Herstellung von Zusammenfassungen und Abstracts.
  • Die Unterstützung von Autoren beim Verfassen von Texten, zum Beispiel das Finden des treffenden Ausdrucks oder der richtigen Terminologie.
  • Die Interaktion des Benutzers mit dem Computer in natürlicher Sprache, so dass Computer auch Personen zugänglich sind, die sich mit den speziellen Befehlen nicht auskennen.

Probleme der Computerlinguistik

Einige der Probleme, die man dabei lösen muss, sind:

  • Bestimmen der Semantik. Die gleiche Wortform kann je nach Kontext eine andere Bedeutung aufweisen (vergleiche Homonym). Man muss die für den Kontext zutreffende Bedeutung auswählen. Auf der anderen Seite braucht man Formalismen zur Repräsentation von Wortbedeutungen.
  • Auflösung syntaktischer Mehrdeutigkeiten. In einigen Fällen lässt sich ein Satz auf mehrere Arten analysieren und deuten. Die Richtige auszuwählen, erfordert manchmal semantische Information über den Sprechakt und die Intention der Sprecher, mindestens jedoch statistisches Vorwissen über das gemeinsame Auftreten von Wörtern.
Beispiel: „Peter sah Maria mit dem Fernglas“ – hier ist nicht zwangsläufig klar, ob Peter Maria gesehen hat, die ein Fernglas in der Hand hielt, oder ob Peter Maria mit Hilfe eines Fernglases sehen konnte.
  • Erkennen der Absicht einer sprachlichen Äußerung (siehe Pragmatik). Manche Sätze sind nicht wörtlich zu verstehen. Beispielsweise erwartet man auf die Frage „Können Sie mir bitte das Salz reichen?“ nicht die Antwort „Ja“ oder „Nein“, sondern bittet stattdessen um das Salz.

Ob und wie sich diese Aufgaben maschinell lösen lassen, ist nicht nur vom Stand der Computertechnologie her vorgegeben, sondern hängt natürlich sehr von den Eigenschaften der Sprache ab. Mehr noch: Man wird zwar nach Verfahren streben, die auf alle Sprachen anwendbar sind, die Details müssen aber für jede einzelne Sprache gesondert ausgearbeitet werden. Ein Programm zur automatischen Trennung von Wörtern, das für das Englische entworfen wurde, wird ohne Anpassung für das Deutsche nicht verwendbar sein, weil hier die Prinzipien der Worttrennung andere sind. Im Unterschied zur Informatik, die sich allgemein mit dem Programmieren von Computern befasst, liegt das Anwendungsfeld der Computerlinguistik also in den sprachspezifischen Teilen von Computerprogrammen.

Eine Wissenschaft definiert sich nicht nur durch ein Anwendungsfeld, sondern auch durch ein theoretisches Interesse. Computer sind Automaten, die Symbole nach bestimmten Regeln manipulieren. Ebenso wie die Zahlen sind aber auch Sprachen – freilich sehr vielschichtige – Symbolsysteme. Es liegt daher nahe, Computerprogramme zu entwerfen, welche die Operationen, die der Mensch mit den Wörtern einer Sprache vollzieht, zumindest teilweise, simulieren. Man kann so sprachwissenschaftliche Hypothesen mit dem Computer prüfen. Die Computerlinguistik ist in diesem Sinne eine Linguistik, welche die Computersimulation als methodisches Mittel einsetzt, um unser Wissen über menschliche Sprachen zu vertiefen.

Letztlich wirft dieser Ansatz allerdings mancherlei psychologische und philosophische Fragen auf. Der Computer ist eine Maschine; die Sprache ist etwas Geistiges. Wie weit kann man das Rechnen mit Sprache treiben? Werden Computer eines Tages denken beziehungsweise funktioniert der menschliche Geist wie eine Symbolmaschine? Das Faszinierende an der Computersimulation von Sprachverhalten ist gerade das Ausloten ihrer Grenzen. Ein Erkenntnisinteresse, aus dem heraus man auch Computerlinguistik betreiben kann, ist es herauszufinden, ob und wie weit menschliche Kommunikation von Computern verarbeitbar ist und falls man an Grenzen stößt, wie diese aussehen. Sind diese Grenzen nur praktische oder grundlegend theoretische? Diese Erkenntnis ist sehr wichtig für den Platz, den wir Computern in der Gesellschaft einräumen wollen.

Siehe auch: Maschinelles Lernen, Sprachverarbeitung, Spracherkennung, Übersetzung

Studium

Computerlinguistik kann man im deutschsprachigen Raum an verschiedenen Hochschulen als eigenständiges Fach mit verschiedenen Abschlussmöglichkeiten (Diplom, Magister, Bachelor, Master) studieren.

Regelmäßige Veranstaltungen

Tagungen

  • jährlich stattfindende Tagung der Computerlinguistik-Studierenden TaCoS (drei- bis viertägige Tagung von Studenten für Studenten).
  • alle zwei Jahre stattfindende Jahrestagung der Gesellschaft für linguistische Datenverarbeitung (GLDV)

Schulen

  • Computational Linguistics Fall School: Seit 2001 regelmäßig alle zwei Jahre stattfindende Herbstschule der Deutschen Gesellschaft für Sprachwissenschaft in englischer Sprache.
  • ESSLLI: European Summer School in Logic, Language and Information
  • EMA Summerschool: European Masters in Language and Speech Technology Summerschool

Organisationen

Literatur

  • James Allen: Natural Language Understanding. Redwood City, CA: The Benjamin/Cummings Publishing Company, Inc., 1995, ISBN 0-805-30334-0
  • Daniel Jurafsky, James H. Martin: Speech and Language Processing - An Introduction to Natural Language Processing, Computational Linguistics and Speech Recognition Upper Saddle River, New Jersey: Prentice Hall, 2. Auflage 2008, ISBN 978-0131873216
  • Kai-Uwe Carstensen, Christian Ebert, Cornelia Endriss, Susanne Jekat, Ralf Klabunde (Hrsg.): Computerlinguistik und Sprachtechnologie. Berlin: Spektrum Akademischer Verlag, 2. Auflage, 2004, ISBN 3-827-41407-5
  • Christopher D. Manning, Hinrich Schütze: Foundations of Statistical Natural Language Processing. Cambridgdgee/MA: MIT Press, 1999, ISBN 0-262-13360-1
  • Ruslan Mitkov (Hrsg.): The Oxford Handbook of Computational Linguistics, Oxford University Press, 2003, ISBN 0-198-23882-7

Weblinks


Wikimedia Foundation.

Игры ⚽ Нужна курсовая?
Synonyme:

Schlagen Sie auch in anderen Wörterbüchern nach:

  • Natural language processing — (NLP) is a field of computer science and linguistics concerned with the interactions between computers and human (natural) languages; it began as a branch of artificial intelligence.[1] In theory, natural language processing is a very attractive… …   Wikipedia

  • natural language processing — noun the branch of information science that deals with natural language information • Syn: ↑NLP, ↑human language technology • Hypernyms: ↑information science, ↑informatics, ↑information processing, ↑IP * * * ˌnatural ˈlanguage processi …   Useful english dictionary

  • natural-language processing — natūraliosios kalbos apdorojimas statusas T sritis informatika apibrėžtis Kompiuterių mokslo ir lingvistikos šaka, tirianti kompiuterines sistemas, galinčias atpažinti ir reaguoti į šnekamąją bei rašytinę žmonių kalbą. atitikmenys: angl. natural… …   Enciklopedinis kompiuterijos žodynas

  • Natural Language Processing — n. NLP, subfield of artificial intelligence and linguistics that deals with generation of natural language, process of understanding and generating of natural human language by a computer …   English contemporary dictionary

  • natural language processing application — noun an application program that deals with natural language text • Syn: ↑natural language processor • Hypernyms: ↑application, ↑application program, ↑applications programme • Hyponyms: ↑disambiguator …   Useful english dictionary

  • natural language processing — noun a field of computer science and linguistics concerned with the interactions between computers and human (natural) languages …   Wiktionary

  • List of natural language processing toolkits — The following natural language processing toolkits are popular collections of natural language processing software. They are suites of libraries, frameworks, and applications for symbolic, statistical natural language and speech processing. NLP… …   Wikipedia

  • Natural Language Processing — Maschinelle Sprachverarbeitung; Computerlinguistik; NLP (fachsprachlich) …   Universal-Lexikon

  • natural language processing — noun the analysis, interpretation and generation of human languages by computer. Abbrev.: NLP …  

  • Natural language user interface — Natural Language User Interfaces (LUI) are a type of computer human interface where linguistic phenomena such as verbs, phrases and clauses act as UI controls for creating, selecting and modifying data in software applications. In interface… …   Wikipedia

Share the article and excerpts

Direct link
Do a right-click on the link above
and select “Copy Link”