Skip to content

Milestones

List view

  • 3rd PM meeting

    Due by January 30, 2025
    0% complete0 open0 closed

  • 1st PM meeting

    Due by January 16, 2025
    0% complete0 open0 closed

  • web_application Oli + Max

    TO DECIDE - tools to use (streamline, flask, ...) -> streamlin & flask can be hosted for fre (tbd where), hosting at neue fische server possible but not recommended - .... Benutzeroberfläche (UI): Startbildschirm: Titel der App: Ein prägnanter Name, z. B. "Hand2Voice" oder "SilentSpeak". Zwei Hauptbuttons: Gebärdensprache erkennen: Startet die Kamera für die Gestenerkennung. Einstellungen: Ermöglicht die Anpassung von Sprache, Lautstärke und weiteren Optionen. Hauptansicht (Gestenerkennung): Kameravorschau: Zeigt live den Bereich, den die Kamera erfasst. Visualisierung von erkannten Handbewegungen (z. B. Punkte oder Umrisse). Textausgabe in Echtzeit: Ein Bereich, der die übersetzte Gebärdensprache als Text anzeigt. Audio-Ausgabe-Button: Spielt die übersetzten Texte als gesprochene Sprache ab. Reset-Button: Setzt die Kamera und den Text zurück, um eine neue Eingabe zu starten. Einstellungen: Sprachauswahl für Audioausgabe: Wählt die gewünschte Sprache oder Stimme (z. B. männlich/weiblich). Anpassung der Sensibilität: Optimiert die Erkennungsgenauigkeit basierend auf der Umgebung. Tutorial-Modus: Eine kurze Einführung, wie die App verwendet wird. Resources: https://www.youtube.com/watch?v=pDXdlXlaCco https://www.youtube.com/watch?v=6Bn0PY_ouBY https://www.youtube.com/watch?v=YjnGou4skGU https://www.youtube.com/watch?v=7sywpZ7o2gg https://www.youtube.com/watch?v=Ui85SVJsRf8

    Due by February 6, 2025
    0% complete0 open0 closed

  • text_to_audio (incl. grammar tbd) Oli

    Milestone: Übersetzung von Gesten zu Sprache funktioniert nahtlos. 1. Text zu Sprache umwandeln: - Bindet eine TTS-API oder Bibliothek ein. 2. Integration: - Verbindet die erkannten Texte mit der Audio-Ausgabe. 3. UI/UX-Design: - Baut eine einfache Benutzeroberfläche für die Demo. TO READ - children stories repo how text to speech is done https://github.com/merekat/children-stories

    Due by January 17, 2025
    0% complete0 open0 closed

  • sl_to_text (picture to word - grammar tbd) Beni + Felix

    Milestone: Einzelne Gesten wird korrekt in Text übersetzt. 1. Datenset trainieren: - Nutzt die Handpositionen und Gesten aus Phase 2. - Trainiert ein ML-Modell (z. B. ein CNN oder RNN) zur Klassifikation von Gesten in Wörter. 2. Übersetzung in Text: - Bindet das ML-Modell in die Anwendung ein.

    Due by January 17, 2025
    0% complete0 open0 closed

  • sl_recognition (motion capturing & video sequencing into frames) Max + Vanessa

    Milestone: Gestenerkennung funktioniert zuverlässig für Einzelgesten. 1. Pipeline aufbauen: - Nutzt OpenCV/Mediapipe, um Hände und Finger aus Kamerastreams zu erkennen. - Extrahiert Positionsdaten der Handgelenke und Finger als Eingabevektor. 2. Tests durchführen: -Gesten lokal visualisieren (z. B. Koordinaten der Handpunkte).

    Due by January 17, 2025
    0% complete0 open0 closed

  • mid_term_presentation

    7-10 min presentation + 7-10 min discussion (per group) * Focus on: what is your business question? What have you done so far? What are the next goals? * Presenting your project is mandatory * Your presentation slides can have an outline like e.g.: * the objective * the data, description of what you have * the chosen evaluation metric * EDA results * planned methodology for achieving results * Timeline (plus where you are on it) * Next steps

    Due by January 27, 2025
    •1/1 issues closed
    100% complete0 open1 closed