Voir le son, entendre des images : la température des lunettes IA

Alors que seulement la moitié de l'année 2026 s'est écoulée, le nombre de lunettes IA commercialisées a déjà atteint 68, avec des marques telles que HUAWEI, Thunderbird, XREAL et KEDAXUNFEI qui lancent toutes de nouveaux produits. Du travail de bureau au sport en passant par les applications d'assistance médicale, les lunettes IA présentent leurs capacités multifonctionnelles.

Il convient de noter que « l’assistance audiovisuelle », une fonctionnalité de niche des lunettes IA, a retenu l’attention des fabricants ces dernières années. Dans une certaine mesure, il ne s'agit pas de la taille potentielle du marché, mais plutôt de la valeur unique que les lunettes IA peuvent démontrer sur ce marché.

En janvier de cette année, la startup roumaine .lumen a présenté une technologie d'accessibilité révolutionnaire : les lunettes de navigation .lumen pour les aveugles. En février, Meta a avancé les fonctions d'assistance des lunettes AI pour aider les personnes souffrant de déficiences cognitives et les anciens combattants à retrouver une vie indépendante ; en mars, Daemyung Optics de Corée du Sud a signé un accord avec Everysight pour développer conjointement des lunettes IA afin de fournir des solutions aux personnes malentendantes et visuelles ; en juin, Rokid a déclaré avoir créé une équipe dédiée à des groupes spéciaux pour mener des recherches sur les besoins des groupes d'utilisateurs concernés, et que ses produits ont été inclus dans la liste des outils d'assistance subventionnés par la Fédération des personnes handicapées du Zhejiang, du Sichuan, du Yunnan et d'autres régions de Chine.

Rendre le son visible : les lunettes à sous-titres ont été incluses dans la liste chinoise des « subventions aux appareils et accessoires fonctionnels ».

Pour les utilisateurs malentendants, l’avantage le plus direct des lunettes IA à l’heure actuelle est la conversion du son en texte lisible en temps réel.

Cette orientation n’est pas nouvelle. En 2022, LLVision a lancé les lunettes de sous-titres AR « Listener », qui utilisent un microphone pour collecter l'audio conversationnel, puis affichent les sous-titres transcrits dans le champ de vision de l'utilisateur. Ce produit était également l’une des premières lunettes de sous-titres AR grand public à être produite en série à l’époque.

Avec la maturation des technologies de reconnaissance vocale et d’affichage léger, le sous-titrage en temps réel commence à passer des appareils d’assistance spécialisés aux lunettes IA à usage général. Meta Ray-Ban Display prend en charge l'affichage des légendes et des traductions des dialogues dans les lentilles, le texte étant visible uniquement par le porteur. Des produits tels que les lunettes Rokid et Thunderbird X3 Pro ont également intégré le sous-titrage et la traduction en temps réel comme fonctionnalités clés de leurs lunettes IA basées sur l'affichage.

Une autre approche technologique consiste à améliorer le son lui-même. La fonction « Conversation Focus » de Meta, testée sur Ray-Ban Meta et Oakley Meta HSTN, utilise des microphones directionnels pour mettre en valeur la voix de l'orateur devant l'utilisateur, réduisant ainsi les interférences du bruit ambiant. Ce type de solution est plus proche des aides auditives légères et convient aux environnements bruyants tels que les restaurants, les expositions et les gares, mais ne peut pas remplacer l'affichage des sous-titres pour les utilisateurs ayant une déficience auditive sévère.

Du point de vue du produit, les lunettes IA possèdent déjà les exigences de base pour convertir la parole en sous-titres, mais il existe encore des différences significatives entre les sous-titres accessibles et la transcription ordinaire d'une réunion. Les conversations quotidiennes impliquent souvent plusieurs personnes parlant simultanément, des dialectes, des accents, une musique de fond et un bruit ambiant soudain. En plus de reconnaître le texte, les lunettes de sous-titres doivent également déterminer l'identité du locuteur et la direction de sa voix, gérer les sauts de phrase, le ton et le contexte, et impliquer la collecte de données par microphone. Développer cette fonction est facile, mais bien la faire ne l’est pas.

Actuellement, la politique nationale chinoise a commencé à adopter cette forme de produit. La nouvelle version du catalogue de Pékin pour les subventions pour l'achat d'appareils fonctionnels pour les personnes handicapées a ajouté « lunettes sous-titrées » à la liste. En juillet 2026, lors d'un événement d'expérience de lunettes accessibles alimenté par l'IA organisé par l'Association pour les sourds du district de Haidian à Pékin, les sous-titres en temps réel, la traduction intelligente et la navigation étaient les principales fonctionnalités présentées.

En rendant les visuels audibles, les lunettes IA commencent à jouer le rôle de compréhension environnementale.

Les besoins des personnes malvoyantes en matière de lunettes IA sont plus complexes. Les utilisateurs malvoyants peuvent conserver une certaine vision et ont besoin de fonctionnalités telles que le grossissement de l'image, l'amélioration des contours, le réglage du contraste, l'amélioration des couleurs et la reconnaissance de texte. Pour les utilisateurs totalement ou presque totalement aveugles, l'écran d'affichage a une valeur relativement limitée ; les produits doivent convertir les images et les informations spatiales en signaux vocaux, tactiles ou autres.

Cela détermine également deux orientations de produits différentes pour les lunettes d'assistance pour les malvoyants. Le premier type aide les utilisateurs à « comprendre ce qui se trouve devant eux ». Les caméras peuvent reconnaître du texte, des marchandises, des billets de banque, des personnes, des panneaux de bus et de route, puis diffuser les résultats via des haut-parleurs ouverts. Les grands modèles multimodaux améliorent les capacités de description de scène, permettant aux lunettes d'aller au-delà de la reconnaissance d'objets uniques et de répondre à des questions telles que « Qu'est-ce qu'il y a sur la table ? », « Que fait la personne en face de moi ? » et « Que dit cet avis ? ».

Le deuxième type aide les utilisateurs à « déterminer leur prochain mouvement ». Ces produits doivent identifier les limites de la route, les marches, les obstacles et les véhicules dynamiques, déterminer les relations spatiales entre les objets, puis fournir des suggestions d'action par le biais d'un retour vocal, vibratoire ou de pression. .lumen adopte cette dernière approche. Son système emprunte aux concepts de perception environnementale de la conduite autonome, en utilisant des capteurs et l'IA pour trouver des chemins de marche sûrs, puis en utilisant le retour haptique pour guider les utilisateurs dans leur changement de direction. L'appareil ne s'appuie pas sur des cartes environnementales pré-dessinées, et n'a pas non plus besoin d'annoncer en permanence les virages à gauche et à droite par la voix, ce qui réduit le fardeau des invites auditives sur l'attention auditive de l'utilisateur.

Cependant, les responsabilités d'un produit augmentent considérablement à mesure qu'il évolue de « décrire l'environnement » à « guider le voyage ». Alors que les réponses aux questions générales de l'IA peuvent parfois présenter des erreurs de reconnaissance, entraînant potentiellement une réponse incorrecte, les systèmes de navigation inaccessibles qui évaluent mal les étapes, les véhicules ou les obstacles pourraient avoir un impact direct sur la sécurité des utilisateurs. Le verre transparent, les obstacles bas, les objets suspendus, le rétroéclairage et les environnements nocturnes sont autant de scénarios dans lesquels les systèmes de vision par ordinateur sont sujets à des erreurs de jugement. Les recherches existantes considèrent généralement la détection d'obstacles, la planification de trajectoires, la fusion de capteurs et le retour interactif comme les principales capacités des systèmes de navigation destinés aux malvoyants.

Par conséquent, à ce stade, les lunettes IA sont plus adaptées en complément des cannes, des chiens-guides et de l’assistance humaine. Lors du marathon de Londres 2026, certains coureurs malvoyants ont utilisé des lunettes intelligentes Meta pour obtenir une reconnaissance de points de repère et des informations vocales, mais le guidage principal était toujours assuré par des coureurs accompagnateurs ou des chiens-guides. Des cas d'utilisation réels montrent que les lunettes IA peuvent améliorer l'efficacité de l'acquisition d'informations, mais elles sont encore loin de prendre pleinement en charge une navigation sûre.

Les produits d’accessibilité doivent également conserver des canaux d’assistance humaine. Lorsque l'appareil ne peut pas déterminer des conditions routières complexes, les utilisateurs doivent pouvoir contacter rapidement les membres de leur famille ou des bénévoles pour transmettre des images en perspective à la première personne et des informations de localisation aux assistants distants. L’IA traitant des informations standardisées à haute fréquence, avec une intervention humaine dans des scénarios à basse fréquence mais à haut risque, peut constituer une combinaison de produits plus fiable à ce stade.

Autonomie de la batterie : un obstacle majeur pour les lunettes IA accessibles

Les lunettes IA accessibles sont des dispositifs d'assistance à haute fréquence et, par rapport aux lunettes IA grand public ordinaires, elles ont des exigences plus élevées en matière de durée de vie de la batterie et de confort de port. En effet, ces produits ne sont pas des outils d'assistance occasionnels, mais plutôt des appareils fréquemment utilisés dans des scénarios à haute fréquence tels que les voyages et les communications. Par conséquent, la durée de vie et le poids de la batterie sont des indicateurs importants pour l’utilisation à long terme de lunettes IA accessibles.

Les écrans, les caméras et l’informatique continue par l’IA restent les plus gros consommateurs d’énergie. L'écran Meta Ray-Ban indique officiellement une autonomie maximale de 6 heures en utilisation mixte ; Les lunettes de prise de vue IA qui éliminent partiellement l'écran d'affichage peuvent prolonger la durée de vie de la batterie jusqu'à plus de 10 heures, mais la durée d'enregistrement vidéo continue ne peut être maintenue que pendant 1 heure, ce qui rend difficile la satisfaction des besoins de compréhension visuelle continue de l'IA.

Actuellement, les fabricants explorent continuellement des améliorations dans la durée de vie des batteries. Par exemple, la batterie tour de cou de Rokid dans son activité Rokid Glass3 B2B offre au moins deux heures et demie de fonctionnement continu pendant que la caméra fonctionne.

De plus, une conception de batterie remplaçable constitue un autre moyen efficace d’augmenter la durée de vie de la batterie d’un point de vue matériel. Les utilisateurs peuvent retirer et insérer la branche pour remplacer la batterie principale, et la batterie secondaire peut maintenir une alimentation continue pendant le processus d'échange. Lorsqu'il est utilisé avec le boîtier d'échange de batterie, il permet une autonomie d'une journée entière. Au niveau du système, une conception d’architecture à double puce peut également améliorer considérablement la durée de vie de la batterie.

Bien entendu, outre les solutions énumérées ci-dessus, une véritable révolution dans les matériaux sous-jacents aux batteries est nécessaire pour véritablement résoudre le problème, comme les progrès dans les matériaux d'anode silicium-carbone et les batteries à semi-conducteurs.

Les données associées montrent que par rapport aux anodes en graphite ordinaires, les anodes en silicium-carbone peuvent améliorer considérablement la densité d'énergie massique et la densité d'énergie volumétrique des batteries, augmentant généralement la densité énergétique globale de la batterie de 8 % à 40 %. Simultanément, grâce à la capacité spécifique théorique élevée du silicium, la durée de vie de la batterie et les performances de charge rapide peuvent également être considérablement optimisées.

Ce matériau a d’abord été utilisé dans les smartphones haut de gamme et autres appareils électroniques, puis a également été appliqué aux lunettes. La batterie XIAOMI Jinshajiang de 263 mAh intégrée aux lunettes AI de XIAOMI utilise la même technologie d'anode silicium-carbone haute densité que celle des téléphones XIAOMI, ce qui améliore considérablement la durée de vie de la batterie des lunettes AI.

Par rapport aux batteries lithium-ion traditionnelles, les batteries à semi-conducteurs offrent une densité énergétique plus élevée, des vitesses de charge plus rapides et une meilleure sécurité. Pour les lunettes IA, la miniaturisation et la haute densité énergétique des batteries à semi-conducteurs sont particulièrement importantes. En tant qu'appareils portables, les lunettes IA ont un espace interne très limité. Les batteries à semi-conducteurs peuvent mieux s'adapter à ces exigences d'espace compact tout en fournissant suffisamment d'énergie pour prendre en charge diverses fonctions des lunettes IA, telles que les écrans à haute luminosité, la reconnaissance d'images et l'enregistrement vidéo de longue durée.

Enfin, le Rapport mondial 2019 sur la vision de l'Organisation mondiale de la santé montre que plus de 2,2 milliards de personnes dans le monde souffrent de déficience visuelle ou de cécité. En ce qui concerne l’audition, environ 1,5 milliard de personnes dans le monde souffrent de divers degrés de perte auditive, dont environ 430 millions souffrent d’une déficience auditive grave.

Même si l'absence de barrières n'est peut-être pas le marché qui connaît la croissance la plus rapide pour les lunettes IA, c'est certainement l'un des scénarios qui teste le mieux la valeur du produit. Les utilisateurs ordinaires peuvent tolérer des erreurs de reconnaissance occasionnelles et utiliser facilement leur téléphone comme alternative ; cependant, pour les utilisateurs qui dépendent d'appareils pour communiquer et voyager, la précision, la latence, la durée de vie de la batterie et la fiabilité ont un impact direct sur l'expérience utilisateur et la sécurité personnelle.

En termes d'accessibilité, outre les personnes malvoyantes et malentendantes, la population « aux cheveux argentés » a également attiré l'attention des fabricants chinois. Lors de la Senior Expo de l'année dernière, LIANHUI Technology a lancé les premières lunettes d'aide visuelle au monde équipées du cerveau intelligent Om, conçues spécifiquement pour les personnes âgées. Les lunettes ne pèsent que 45 grammes, ont une autonomie de 8 heures et prennent en charge les capacités de l'IA telles que la détection de tout, l'interaction proactive et la prise de décision autonome.

Lors de la 4e Foire internationale d'optique de Shenzhen en Chine et du premier salon de lunettes d'intelligence artificielle de 2026, MINGZHI Cloud Technology a également lancé des lunettes alimentées par l'IA pour les personnes âgées. Équipées d'une technologie de modèle à grande échelle, ces lunettes intègrent des fonctions telles que l'assistance visuelle, l'assistance auditive, les interventions d'urgence et l'assistance à distance, offrant ainsi une solution portable intelligente personnalisée pour les personnes âgées.

Le contact humain dans les lunettes IA ne cesse d’augmenter.

Source : VRTUOLUO