D1

SignMeUp – Echtzeit-Erkennung der American Sign Language (ASL)

Projektmanager / Data Scientist (neuefische GmbH) · Sep 2023 – Dez 2023

Entwicklung eines Echtzeit-Prototyps zur ASL-Erkennung: eine durchgängige Machine-Learning-Pipeline, die Hand-Landmarks extrahiert, zeitliche Gesten klassifiziert und Lernenden direktes Feedback gibt.

Technologien

PythonTensorFlow (Keras)LSTMMediaPipeOpenCVGoogle CloudScikit-LearnMLflow

Beiträge

  • Projektleitung: Definition des Projektumfangs, Steuerung der Team-Kommunikation und Durchführung von Stakeholder-Präsentationen.
  • Modellentwicklung: Konzeption und Optimierung eines LSTM-Neuronennetzes zur Klassifikation zeitlicher Sequenzen von ASL-Gesten.
  • Data Engineering: Entwicklung einer Pipeline zur Echtzeit-Landmark-Extraktion, Feature-Engineering und Datenbereinigung aus Video-Streams.

Ergebnis

Lieferung eines funktionsfähigen Prototyps für Echtzeit-Inferenz, der unmittelbares Feedback für Lernende der Gebärdensprache ermöglicht.