BIGEKO - Bidirektionale Gebärdensprach-Kommunikation per KI-basierter Übersetzung von Text und Gebärdensprache; Teilvorhaben: Demonstratortypische Kommunikationsplattform für Gebärdensprache

Abstract

Das Verbundprojekt BIGEKO - "Bidirektionale Gebärdensprach-Kommunikation per KI-basierter Übersetzung von Text und Gebärdensprache" - verfolgte das Ziel, neue technische Möglichkeiten für eine barrierefreie Kommunikation zwischen tauben und hörenden Menschen zu erforschen. Als exemplarischer Anwendungsfall wurde die Kommunikation in einer Notfallsituation gewählt. Taube Menschen sollten die Möglichkeit erhalten, in Deutscher Gebärdensprache (DGS) mit einer hörenden Leitstelle zu kommunizieren. Die Kommunikation sollte dabei in beide Richtungen unterstützt werden: Gebärdensprache sollte automatisiert erkannt und in Text überführt werden; Antworten der Leitstelle sollten wiederum in Gebärdensprache übersetzt und durch einen digitalen Gebärdensprach-Avatar dargestellt werden. Das Teilvorhaben der Charamel GmbH "Demonstratortypische Kommunikationsplattform für Gebärdensprache" hatte insbesondere die Aufgabe, die im Verbund erforschten Technologien in einer gemeinsamen technischen Umgebung zusammenzuführen und anhand eines Demonstrators praktisch zu untersuchen. Charamel übernahm neben Aufgaben der Projektkoordination insbesondere die technische Integration und Entwicklung der Demonstratorplattform. Schwerpunkte waren die Weiterentwicklung der Echtzeit-3D-Avatartechnologie zur Darstellung von Gebärdensprache, die Aufnahme und Verarbeitung von Bewegungs- und Animationsdaten sowie die softwaretechnische Integration der im Verbund entwickelten Erkennungs- und Übersetzungskomponenten.