Multimodal InteractionModule description #40586 / Version 6
- 6 CP
- Portfolio examination
- Graded
- Summer semester
- English, German
This module description is not valid in the current semester (Winter semester 2026/27).
Current version (v8)
| Module / Version | #40586 / #6 |
|---|---|
| Validity | SS 2017 – WS 2017/18 |
| Available language(s) | English, German |
| Credit points | 6 |
| Person responsible for the module | Möller, Sebastian |
| Grading | Graded |
| Exam format | Portfolio examination |
| Language(s) of instruction | English, German |
Affiliation
| Faculty | Fakultät IV |
|---|---|
| Institute | Institut für Softwaretechnik und Theoretische Informatik |
| Academic chair | 34355300 FG S-Professur Quality and Usability |
Contact
| Office | MAR 6-7 |
|---|---|
| Contact person | Jettkowski, Tobias |
| E-mail address | module@qu.tu-berlin.de |
| Website | https://tu.berlin/qu |
Learning outcomes
Students gain:
- Understanding of “Usabiliy” as interdisciplinary research and application field during the development of information and communication technologies
- Knowledge of the realisation of human-computer interfaces
- Application of this knowledge in the design cycle of technical systems
- Hands-on practicing of the learned skills evaluating the quality and usability of selected technical systems.
- Presenting and transferring the learned skills to others
- Understanding of “Usabiliy” as interdisciplinary research and application field during the development of information and communication technologies
- Knowledge of the realisation of human-computer interfaces
- Application of this knowledge in the design cycle of technical systems
- Hands-on practicing of the learned skills evaluating the quality and usability of selected technical systems.
- Presenting and transferring the learned skills to others
Content
IV “Multimodal Interaction”
In this seminar we will set the basics for an understanding of multimodal communication between humans and multimodal interaction between humans and machines. We will start with clarifying the basic principles of human-human communication and human-machine interaction. We will then describe the processes taking place in humans when perceiving auditory, visual and tactile signals, as well as how these perceptions are integrated in order to form a multimodal perception. The signals can be generated and received by machines which are able to interact with humans in limited domains. The set-up of such machines will be discussed, and limitations as well as potential solutions to overcome these limitations will be explained.
In this seminar we will set the basics for an understanding of multimodal communication between humans and multimodal interaction between humans and machines. We will start with clarifying the basic principles of human-human communication and human-machine interaction. We will then describe the processes taking place in humans when perceiving auditory, visual and tactile signals, as well as how these perceptions are integrated in order to form a multimodal perception. The signals can be generated and received by machines which are able to interact with humans in limited domains. The set-up of such machines will be discussed, and limitations as well as potential solutions to overcome these limitations will be explained.
Module components
Compulsory area
The following courses are mandatory for this module:
| Courses | Type | Number | Frequency | Language | Hours per week | Course catalog |
|---|---|---|---|---|---|---|
| Multimodal Interaction | Integrated course | Summer semester | – | 4 | ISIS |
Workload and credit points
Multimodal Interaction (Integrated course)
| Workload description | Multiplier | Hours | Total |
|---|---|---|---|
| Präsenzzeit | 15 | 4 h | 60 h |
| Vor-/Nachbereitung | 15 | 8 h | 120 h |
| 180 h | |||
The workload of the module adds up to 180 hours. The module therefore comprises 6 credit points.
Description of teaching and learning methods
Literature work and written elaborations under guidance; talk and discussion in the plenum
Requirements for participation and examination
Desirable prerequisites for participation in the courses:
Basic knowledge of information and communication technologies
Mandatory requirements for the module examination registration:
This module has no examination requirements.
Completion of the module
| Grading | Graded |
|---|---|
| Exam format | Portfolio examination |
| Type of portfolio examination | 100 points in total |
| Language | English, German |
Test elements
| Name | Points/Weight | Category | Duration/Extent |
|---|---|---|---|
| (Ergebnisprüfung) Technische Dokumentation des Demonstrators | 15 | written | 5-15 Seiten |
| (Ergebnisprüfung) Video des Demonstrators im konkreten Anwendungsfall | 5 | practical | maximal 3 Minuten |
| (Ergebnisprüfung) Vortrag | 20 | oral | 45 min |
| (Punktuelle Leistungsabfrage) 2 schriftliche Prüfungen je 45 min à 30 Punkte | 60 | flexibel | 90 min |
Exam description
Schriftliche Prüfungen: Geprüft wird der Inhalt der Vorlesung Multimodale Interaktion bis zum Zeitpunkt des jeweiligen Prüfungstermins. Dazu werden im Semester zwei schriftliche Prüfungen zu je 45 Minuten durchgeführt.
Vortrag: Geprüft werden Ergebnisse und die Präsentation dieser Ergebnisse anhand eines 20 bis 30 minütigen mündlichen Vortrags in der Übung Multimodale Interaktion. Der Vortrag ist von der jeweiligen Projektgruppe gemeinsam vorzubereiten.
Technische Dokumentation des Demonstrators: Geprüft wird eine schriftliche Ausarbeitung in der die Erstellung und Funktionsweise eines von der Gruppe implementierten Demonstrators beschrieben wird. Der Umfang der Ausarbeitung beträgt je nach Vorgabe durch die Lehrkräfte 5 bis 15 Seiten und von der Gruppengröße abhängig. Die Ausarbeitung ist von der jeweiligen Projektgruppe gemeinsam anzufertigen.
Video des Demonstrators im konkreten Anwendungsfall: Geprüft wird ein Video, welches die Funktionsweise des Demonstrators in einem Anwendungsfall möglichst ansprechend darstellt. Das Video ist von der jeweiligen Projektgruppe gemeinsam anzufertigen.
Vortrag: Geprüft werden Ergebnisse und die Präsentation dieser Ergebnisse anhand eines 20 bis 30 minütigen mündlichen Vortrags in der Übung Multimodale Interaktion. Der Vortrag ist von der jeweiligen Projektgruppe gemeinsam vorzubereiten.
Technische Dokumentation des Demonstrators: Geprüft wird eine schriftliche Ausarbeitung in der die Erstellung und Funktionsweise eines von der Gruppe implementierten Demonstrators beschrieben wird. Der Umfang der Ausarbeitung beträgt je nach Vorgabe durch die Lehrkräfte 5 bis 15 Seiten und von der Gruppengröße abhängig. Die Ausarbeitung ist von der jeweiligen Projektgruppe gemeinsam anzufertigen.
Video des Demonstrators im konkreten Anwendungsfall: Geprüft wird ein Video, welches die Funktionsweise des Demonstrators in einem Anwendungsfall möglichst ansprechend darstellt. Das Video ist von der jeweiligen Projektgruppe gemeinsam anzufertigen.
Duration of the module
The following number of semesters is estimated for taking and completing the module: 1 semester(s).
This module can be started in the following semesters: Summer semester.
Maximum number of participants
The maximum capacity of participants is 30.
Registration procedures
Registration for the seminar in the first course meeting
Recommended reading, lecture notes
Lecture notes
unavailable
Electronic lecture notes
available – Can be downloaded from ISIS page of the corresponding courses.
Recommended literature
- Literature for the seminar will be announced in the course.
Assigned programs
This module is not used in any program.
- Master Technische Informatik: Technische Anwendungen
- Master Wirtschaftsingenieurwesen: Informations- und Kommunikationssysteme
- Master Audiokommunikation und -technologie
- Master Wirtschaftsingenieurwesen: Informations- und Kommunikationssysteme
- Master Audiokommunikation und -technologie
Miscellaneous
The topics of the module can serve as a foundation of a master thesis in the area.