Dauer: 36 Monate
Kickoff: September 2021
Förderung: Bundesministerium für Bildung und Forschung (BMBF)
Traditionelle Online-Lehre, die Inhalte über statische Video- und Audioskripte bereitstellt, ist nur wenig interaktiv und in ihrer Wirkung begrenzt, da Nutzer:innen kaum Rückmeldungen geben können. Mixed Reality (MR) in Verbindung mit animierbaren volumetrischen Avataren ermöglicht ein immersives und interaktives Lernmedium, das eine völlig neue Qualität der Lehrerfahrung ermöglicht.
Aristech ist im Rahmen des Projektes für die Synthetisierung des von der/m Lehrenden vorgegebenen Text durch Text-To-Speech verantwortlich. Die Stimme wird hierbei mithilfe eines neuentwickelten Machine Learning-Verfahrens naturgetreu der Originalstimme nachgebildet. Der Gesichtsausdruck, die Lippenbewegung und die Körpersprache des Avatars werden automatisch an das Gesprochene angepasst.
Außerdem werden Sprachsynthese und Spracherkennungsmethoden und ein Chatbot-System entwickelt. Damit wird einerseits dem animierten Avatar aus einem von dem/r Lehrenden bereitgestellten Text eine realistische Stimme verliehen und andererseits die Möglichkeit für sprachlichen oder textbasierten Nutzer:innen-Input ermöglicht.
Durch das Projekt werden erstmals die Vorteile von traditionellen Vorlesungen und Online-Lehrumgebungen kombiniert, in denen Lehrende nicht nur auf dem Videobild, sondern auch virtuell/physisch präsent und erfahrbar sind.
Im Projekt VoluProf arbeiten wir mit verschiedenen Projektpartnern zusammen:
- Fraunhofer Heinrich-Hertz-Institut (HHI) - Verbundkoordinator
- Deutsche Telekom AG
- Volucap GmbH
- Deutsches Forschungszentrum für Künstliche Intelligenz (DFKI)
- Universität Rostock
