Grundstudiums-Praktikum

Multimodale Verarbeitung - mehrsprachige Fernwartung mit Bildunterstützung

Walther v. Hahn, Cristina Vertan

4st. F 235/F 231, Mi 10 - 14

Inhalt

Implementierung eines einfachen Systems zur maschinellen Sprachverarbeitung mit Unterstützung von Bildverarbeitung in einem begrentzen Szenario. Dies besteht aus einer Fernwartungsberatung in der Domäne Autoreparatur. Der PKW-Fahrer kommuniziert mit einem Computer-unterstützten Servicetechniker durch sprachliche und visuelle Eingaben. Der Dialog mit den "Techniker" kann in mehreren Sprachen durchgeführt werden. Die Gruppen sollen integrierte Lösungen für die Behandlung linguistischer Phänomene,die Modellierung einer Dialoggrammatik, die automatische Erkennung zweier Sprache sowie einfache Bildanalyse implementieren und vorstellen.

Lernziel

• Kennenlernen und Verwenden von wichtigen und häufig verwendeten Verfahren der Sprachverarbeitung
• Integration multimodaler Eingaben
• Praktische Gestaltungsübungen,
• Modularität komplexerer Systeme
• Projektmanagement innerhalb und zwischen Gruppen,
• Software-Evaluation

Stell. im Studienplan

Grundstudium

Voraussetzungen

Programmierkenntnisse

Vorgehen

• Eine fachliche Vorbereitung wird während den ersten 5 Wochen parallel zu ersten Implementierungsaufgaben von den Veranstaltern gegeben.
• Es folgt die Hauptphase der implementierung.
• Am Ende wird das System und seine Teile von den Teilnehmern evaluiert.

Literatur

wird in der ersten Sitzung ausgegeben

Periodizität

unregelmäßig

Eignung

Geeignet für Lehramtsstudierende, Nebenfachstudierende, Bioinformatikstudierende, Wirtschaftsinformatikstudierende.

Stichworte

Multimodalität, Multilingualität,komplexe Manipulation und Navigation

Zur Praktikumswebseite