Brisons le silence,
avec HearMyHands.

Traduction en temps réel de la Langue des Signes Française propulsée par l'Intelligence Artificielle.

Traduire la LSF
À propos du projet

Briser le silence, main dans la main

En France, plus de 5 millions de personnes sont touchées par un handicap auditif, et moins de 120 000 utilisent réellement la Langue des Signes Française au quotidien*. Entre les deux, un mur de silence — que HearMyHands veut faire tomber, en traduisant la LSF en texte en temps réel via une simple webcam, sans matériel spécialisé.

5,2 M personnes concernées en France
< 120 k locuteurs réguliers de la LSF
26 lettres de l'alphabet LSF (statiques + dynamiques)

Comment ça marche

1

Capture

Ta webcam envoie ses frames en binaire via WebSocket à notre serveur, ~30 fps.

2

Squelette

Notre modèle custom (CSPDarknet53 + heatmaps + Soft-Argmax) prédit 9 points du haut du corps. MediaPipe Hands ajoute les 21 landmarks de chaque main, cropées autour des poignets.

3

Lettre & mot

Un MLP 42→30→23 pour les lettres statiques, et notre GRU temporel Ocarina sur 45 frames pour les signes en mouvement (J, Z, mots) — ~80% d'accuracy en validation.

L'équipe

Projet PeiP 2A · Polytech Nantes · Année 2025–2026 · clique un nom pour la bio

Chef de projet · Coordination

  • Marius DEMONFAUCON

Pôle Vision Modèle 1

  • Titouan DESAILLY · Responsable
  • Maxime D'AURIA
  • Thibault CAPEDEVIELLE
  • François DELAUNAY

Pôle Traduction Modèle 2 · Ocarina

  • Killian SEVALLE · Responsable
  • Dalyan PENISSON
  • Louna PEJOT
  • Nestor CORABOEUF
  • Nathan DIZY

Pôle Interface

  • Kaelig LERAY · Responsable
  • Killian SEVALLE

Communication & Direction artistique

  • Arthur PIERRE · Responsable / CM
  • Nestor CORABOEUF
  • Kaelig LERAY
  • Louna PEJOT

Outils & Organisation technique

  • Thibault CAPEDEVIELLE · Responsable Git
  • Maxime D'AURIA · Gérant Drive
  • François DELAUNAY · Admin Discord

Encadrants

Polytech Nantes & Laboratoire LS2N

  • Hélène Pérennou Tutrice pédagogique · Prof. de mathématiques, Polytech Nantes
  • Matthieu Perreira Da Silva Enseignant-chercheur LS2N · accompagnement technique IA

Stack & données

  • PyTorch · CSPDarknet53 + heatmaps + Soft-Argmax
  • MediaPipe Hands (Google)
  • GRU temporel Ocarina (45 frames, 2 layers, hidden 128)
  • Dataset interne segmenté (749 clips JSON COCO)
  • Flask · Socket.IO · gunicorn + gevent
  • Déployé sur GCP (Europe) · Cloudflare devant
Aligné avec les Objectifs de Développement Durable de l'ONU :
ODD 4 · Éducation de qualité ODD 10 · Inégalités réduites

* Source : Drees, Le handicap auditif en France, et FNSF. Pour nous écrire : hearmyhands.polytech@gmail.com