D1

SignMeUp – Echtzeit-Erkennung der American Sign Language (ASL)

Projektmanager / Data Scientist (neuefische GmbH) · Sep 2023 – Dez 2023

Machine-Learning-Pipeline und Anwendungsprototyp zur Echtzeit-Erkennung von ASL-Gesten, konzipiert für die Integration in eine digitale Lern-App für Gebärdensprache.

Technologien

PythonTensorFlow (Keras)LSTMMediaPipeOpenCVGoogle CloudScikit-LearnMLflow

Beiträge

  • Projektleitung: Definition des Projektumfangs, Steuerung der Team-Kommunikation und Durchführung von Stakeholder-Präsentationen.
  • Modellentwicklung: Konzeption und Optimierung eines LSTM-Neuronennetzes zur Klassifikation zeitlicher Sequenzen von ASL-Gesten.
  • Data Engineering: Entwicklung einer Pipeline zur Echtzeit-Landmark-Extraktion, Feature-Engineering und Datenbereinigung aus Video-Streams.

Ergebnis

Lieferung eines funktionsfähigen Prototyps für Echtzeit-Inferenz, der unmittelbares Feedback für Lernende der Gebärdensprache ermöglicht.