Prof. Dr. Munir Georges

This course covers fundamentals and state-of-the-art in virtual and augmented reality, as well as related areas of 3D computer vision and graphics. Theoretical background as well as practical solutions and applications will be presented in the lectures. AR/VR topics covered in the course range from applications to Gaming, Entertainment, Education, Healthcare, Architecture, Engineering and Construction, Shopping, or Telepresence.
In the accompanied practical and based on the principle of problem-based learning, students will be asked to design an own project (individual or groups) from idea, via implementation, testing, evaluation, demonstration, to documentation. In this way they will experience the full lifecycle of a practical project in AR/VR, as they will face it once they leave the university in either industry or research. A default project will be suggested as fall back, still covering the full lifecycle except the idea.

Nach erfolgreicher Teilnahme an den Modulveranstaltungen Sprach- und Textverstehen sind Sie in der Lage,

• die Grundzüge der Sprach- und Textverstehen zu erläutern
• Text und Sprachsignale zu analysieren und auszuwerten
• bestehende Anwendungen einzuordnen und zukünftige Entwicklungen einzuschätzen
• grundlegende Sprach-/Text Algorithmen für Problemlösungen einzusetzen vorgegebene und selbst entworfene Algorithmen zur Sprach- und Textverarbeitung formal und in der Programmiersprache Python zu formulieren.
  

In dem Projekt "Empathy with aN AutonoMOUs Robot" (ENAMOUR) wird das Zusammenspiel aus Semantik und Pragmatik in der Mensch-Roboter Interaktion erforscht. In dem interdisziplinärem Projekt bauen Sie die Sprachsteuerung. Auf Basis von Open Source Software entwickeln und integrieren Sie diese auf einem mobilen Roboter. Es wird sich  um einen Roboterhund handeln. Parallel zu der Programmierung entwerfen Sie ein Dialogmodell und sammeln Audio/Text Daten mit denen die ASR/NLU Modelle trainiert und evaluiert werden.

Sie werden in einem agilen Entwicklungsteam arbeiten und gemeinsam die Sprachsteuerung realisieren. Das selbstorganisierende und funktionsübergreifende Team wird Anforderungen ermitteln und Lösungen gemeinsam erarbeiten. Individuelle Berichte geben Einblick in Teillösungen. Zum Abschluss wird die Technik beschrieben und einer breiten Öffentlichkeit präsentiert.

Nach erfolgreicher Teilnahme an den Modulveranstaltungen Sprach- und Textverstehen sind Sie in der Lage,

• die Grundzüge der Sprach- und Textverstehen zu erläutern
• Text und Sprachsignale zu analysieren und auszuwerten
• bestehende Anwendungen einzuordnen und zukünftige Entwicklungen einzuschätzen
• grundlegende Sprach-/Text Algorithmen für Problemlösungen einzusetzen vorgegebene und selbst entworfene Algorithmen zur Sprach- und Textverarbeitung formal und in der Programmiersprache Python zu formulieren.