Tu veux les meilleurs outils IA avant les autres ?
On teste et on décrypte les nouveaux outils IA chaque soir, en 5 min. Gratuit.
Inclus dès l'inscription : notre sélection des meilleurs guides & comparatifs IA.
Choisis ton rythme
Gratuit · Pas de spam · Désabonnement en 1 clic
Google dévoile SL2T : l'IA qui traduit la langue des signes en texte
Hier, Google a présenté ses nouveaux smartphones Google Pixel. En plus du Pixel 11, de ses variantes et de nouveaux accessoires, la firme a également annoncé des nouveautés intéressantes côté logiciel. Par exemple, elle lance Tap to share, une fonctionnalité Android qui permet à deux personnes d’échanger des contacts en rapprochant leur smartphone.
En matière de santé, Google a présenté de nouvelles technologies, dont un algorithme qui détecte les urgences respiratoires et qui appelle automatiquement les secours si l’utilisateur n’est plus en mesure de réagir. Pour l’accessibilité, la firme lance le modèle d’IA sign-language-to-text ou SL2T, capable de traduire la langue des signes en texte quasiment en temps réel.
SL2T est notre modèle révolutionnaire de traduction de la langue des signes en texte, alimentant de nouvelles fonctionnalités pour les utilisateurs sourds et malentendants sur Android. À partir de l'American Sign Language (ASL) vers l'anglais sur le Pixel 11, les utilisateurs peuvent signer directement dans Gboard et Live Transcribe au lieu de taper.
Un traducteur pour la langue des signes
En substance, cette IA reçoit la langue des signes en flux vidéo et génère le texte correspondant. Google a développé cette fonctionnalité pour que des personnes sourdes ou malentendantes puissent interagir de manière plus naturelle avec ses produits, comme Gemini, sans être constamment obligées d’utiliser le clavier.
Cette fonctionnalité peut également servir d’interprète entre une personne sourde ou malentendante et une autre personne qui ne comprend pas la langue des signes. Le seul bémol est que l’accès à cette nouvelle IA est encore très limité.
Un accès limité, pour le moment
SL2T permet la dictée de signes en texte dans Gboard et Live Transcribe sur le Pixel 11, en commençant par la langue des signes américaine (ASL) vers l’anglais. Néanmoins, Google promet également de "bientôt" prendre en charge plus d’appareils et plus de langues.
Concernant les langues, Google indique avoir déjà travaillé sur 100 000 heures de données sur plus de 50 langues des signes différentes (avec un quart en langue des signes américaine). En revanche, pour les appareils, il est possible que cette fonctionnalité nécessite une certaine puissance de calcul locale. En effet, SL2T fonctionne partiellement en local. Un modèle local convertit la vidéo du signeur en coordonnées géométriques, et ce sont ces points géométriques qui sont convertis en texte sur les serveurs de Google. L’avantage de ce système est qu’il protège la vie privée en évitant de traiter les flux vidéo sur le cloud.
70 millions de personnes concernées
On estime qu’il y a 70 millions de personnes sourdes ou malentendantes dans le monde. Selon Google, alors que la capacité de l’IA à traiter le langage oral a rapidement progressé, cette “révolution” ne profite pas encore aux personnes qui doivent utiliser la langue des signes.
“Tout comme les utilisateurs entendants peuvent recourir à la dictée vocale pour parler au lieu de taper du texte, cette fonctionnalité permet aux utilisateurs sourds de communiquer en langue des signes sur leur téléphone partout où ils taperaient normalement du texte. Vous pouvez utiliser la langue des signes pour effectuer des recherches sur Internet, rédiger des messages ou des documents, et demander à Gemini de répondre à vos questions ou d’exécuter des tâches”, explique la firme de Mountain View.
Récemment, Google a partagé des données sur la manière dont les gens se servent de Gemini, qui vient de franchir le milliard d’utilisateurs actifs par mois. Celui-ci évoque une montée en popularité des interactions vocales avec l’IA. En effet, 63 % des utilisateurs de Gemini parlent directement avec l’IA, et certains n’utilisent carrément plus le clavier pour interagir avec celle-ci.
Google vient de présenter l’IA sign-language-to-text ou SL2T, capable de convertir un flux vidéo en langue des signes en texte. Ce modèle vise à permettre aux personnes utilisant la langue des signes d’interagir avec ses produits, mais aussi de se faire comprendre par les personnes qui ne comprennent pas la langue des signes. L’IA est pour le moment limitée à la langue des signes américaine, mais la prise en charge d’autres langues arrive bientôt.
