Une équipe de chercheurs de l’Université Cornell a développé des lunettes, EchoSpeech, dotées de technologie et d’une IA qui leur permet de lire les chuchotements.
Effectivement, une équipe de chercheurs de l’Université privé de Cornell située à New York a développé des lunettes intelligentes. Ces dernières sont composées de haut-parleurs et de microphones montés sur un cadre en verre et qui émettent des ondes sonores inaudibles vers la peau.
En analysant les échos de plusieurs chemins, ces lunettes appelées EchoSpeech capturent les déformations subtiles de la peau. Celles-ci causées par les énoncés silencieux et les utilisent pour déduire la parole silencieuse.
Dans quels cas pouvons-nous utiliser cette technologie?
Les porteurs des ces lunettes peuvent les utiliser pour donner des commandes silencieuses à un appareil couplé. Comme un ordinateur portable ou un smartphone.
Pas seulement, ils peuvent également s’en servir pour communiquer via smartphone. Dans des endroits où la parole est gênante ou inappropriée. Tels que dans un restaurant bruyant ou dans une bibliothèque tranquille.
“Pour les personnes qui ne peuvent pas vocaliser le son, cette technologie de parole silencieuse pourrait être une excellente entrée pour un synthétiseur vocal”,
a déclaré Ruidong Zhang, doctorant à l’Université Cornell et auteur de l’étude, dans un communiqué de presse.
D’ailleurs, une petite étude portant sur 12 personnes portant ces lunettes a prouvé qu’elles pouvaient reconnaître 31 commandes isolées. Ainsi qu’une chaîne de chiffres connectés émis par les sujets avec des taux d’erreur inférieurs à 10 %.
Comment fonctionnent-elles ?
Tout d’abord, nous avons les haut-parleurs et les microphones qu’on a placé sur des lentilles différentes sur différents côtés du visage. Lorsque ces haut-parleurs émettent des ondes sonores d’environ 20 kilohertz, elles se déplacent d’une lentille aux lèvres. Puis à la lentille opposée.
Ensuite, lorsque les ondes sonores des haut-parleurs se reflètent et se diffractent après avoir touché les lèvres, leurs motifs distincts sont capturés par des microphones et utilisés pour créer des « profils d’écho » pour chaque phrase ou commande.
Elles fonctionnent efficacement comme un simple système de sonar miniaturisé.
Pour finir, et grâce à l’apprentissage automatique, ces profils pourront déduire déduire les mots prononcés.
A noter que même si le modèle est pré-formé sur certaines commandes, il passe également par une phase de paramétrage. Et cela pour chaque individu qui prend environ 6 à 7 minutes pour chaque nouvel utilisateur.
Cela dans le but de personnaliser et d’améliorer ses performances.
Aussi pratiques que sûres
En effet, dans une démonstration l’équipe a utilisé une version basse consommation d’EchoSpeech qui pouvait communiquer sans fil via Bluetooth avec un microcontrôleur et un smartphone.
Le téléphone Android auquel l’appareil s’est connecté a géré tout le traitement des données. Il a ensuite transmis les résultats à certaines touches. Celles-ci lui ont permis plusieurs fonctions comme jouer de la musique, ou activer des assistants vocaux.
“La plupart des technologies de reconnaissance vocale silencieuse se limitent à un ensemble sélectionné de commandes prédéterminées et obligent l’utilisateur à faire face ou à porter une caméra, ce qui n’est ni pratique ni faisable.”
a expliqué François Guimbretière, professeur à l’Université Cornell
“Comme il existe des problèmes majeurs de confidentialité impliquant des caméras portables à la fois pour l’utilisateur et pour ceux avec qui l’utilisateur interagit.”
Tandis que la technologie de détection acoustique comme EchoSpeech élimine le besoin de caméras vidéo portables.
“Et parce que les données sont traitées localement sur votre smartphone au lieu d’être téléchargées sur le cloud, les informations sensibles à la vie privée ne quittent jamais votre contrôle.”
Conclut le professeur.
Sans oublier que les données audio nécessitent moins de bande passante pour être transmises que les vidéos ou les images, et nécessitent également moins d’énergie pour fonctionner.
s2luyd