Lentilles de contact intelligentes : contrôlez les écrans MicroLED en un clin d'œil

J'ai essayé les lentilles de contact à suivi oculaire de Mojo Vision. En fin de compte, vous pouvez aussi l'essayer.
En 2009, j'ai commencé à passer en revue les ordinateurs portables chez CNET.Maintenant, j'explore la technologie portable, la VR/AR, les tablettes, les jeux et les tendances futures/émergentes dans notre monde en évolution.D'autres obsessions incluent la magie, le théâtre immersif, les puzzles, les jeux de société, la cuisine, l'improvisation et les Jets de New York.
Une série de marqueurs directionnels contextuels sont apparus, apparaissant sous la forme de minuscules lignes vertes dans mon champ de vision. Lorsque je me retourne, je peux voir dans quelle direction se trouve le nord. Ce sont les marques sur la boussole, projetées sur un petit écran MicroLED, placé sur une lentille de contact et tenue devant mes yeux avec un bâton. Après des années à essayer des lunettes intelligentes, mon retour à voir les choses à travers les lentilles incurvées de la taille d'un ongle est plus sauvage que jamais. Pourtant, je ne suis pas sûr s'il faut le porter à mes yeux.

Lentilles De Contact VertesX

Lentilles De Contact VertesX
Mojo Lens est un objectif d'affichage autonome que j'ai essayé plus tôt au CES 2020 dans une première itération avant la pandémie, et la société dit qu'il sera éventuellement disponible pour des tests internes.
J'ai testé les derniers prototypes de lentilles de Mojo Vision dans un immeuble de bureaux du centre-ville de Manhattan il y a quelques semaines, alors que l'entreprise se préparait pour la prochaine phase de développement interne. Bien que les lentilles de contact de Mojo ne soient toujours pas approuvées pour un usage quotidien, ce sont une autre étape transmettre et représenter le package technologique complet de l'entreprise à inclure dans la version 1.0.
La technologie de Mojo Vision est la réalité augmentée dans un sens. Mais pas comme vous pourriez le penser. L'écran vert monochrome à lentille dure peut afficher du texte, des graphiques de base et même quelques illustrations, mais il fonctionne plus comme une montre intelligente. L'accéléromètre, le gyroscope, et le magnétomètre lui donnent également quelque chose que je n'ai jamais essayé auparavant : le suivi des yeux.
L'affichage de l'objectif est le point vert au milieu. C'est tout. L'anneau matériel autour du bord est le suivi de mouvement et d'autres composants de la puce.
Contrairement à la technologie de suivi oculaire des lunettes VR et AR, qui utilisent une caméra pour détecter le mouvement des yeux, ces lentilles suivent le mouvement des yeux en s'asseyant réellement sur votre œil. Les dirigeants de Mojo Vision disent que, comme les montres intelligentes, les capteurs peuvent calculer le mouvement plus précisément que VR ou Lunettes AR. Je ne les porte pas réellement dans mes yeux car les lentilles ne sont pas encore là. J'ai tenu la lentille très près de mes yeux et j'ai tourné la tête pour voir l'effet de suivi.
Lorsque j'ai essayé les images de Mojo en 2020, il s'agissait d'une version sans technologie de suivi de mouvement intégrée ni aucune batterie. La nouvelle version dispose d'un réseau de batteries, d'un suivi de mouvement et d'une connectivité sans fil à courte portée.
Mais l'objectif n'est pas un appareil autonome. Une connexion sans fil personnalisée communique directement avec l'appareil supplémentaire porté sur le cou, que Mojo appelle un relais, qui agira comme un ordinateur compagnon pour l'objectif. Je ne vois pas cette partie du Mojo Matériel de vision, seulement l'objectif.
Ces objectifs peuvent se connecter sans fil à des appareils locaux, en gardant le suivi de mouvement et les éléments d'affichage sur l'objectif lui-même.
Les lentilles ne peuvent pas se connecter directement aux téléphones pour le moment, car les lentilles nécessitent une connexion sans fil à courte portée plus économe en énergie. "Bluetooth LE est trop bavard et gourmand en énergie", a déclaré Steve Sinclair, vice-président senior des produits chez Mojo Vision, en tant que il m'a expliqué la dernière démo. "Nous avons dû créer la nôtre."La connexion sans fil du Mojo Vision est dans la bande 5 GHz, mais Sinclair a déclaré que la société avait encore du travail à faire pour s'assurer que la connexion sans fil ne capte pas ou ne provoque pas d'interférences.
"Le téléphone n'a pas la radio dont nous avons besoin", a déclaré Sinclair. "En raison des capacités de transmission de l'objectif, il doit être légèrement plus proche de la tête."Il a déclaré que la technologie pourrait être intégrée dans des casques ou même des lunettes, mais les dispositifs de type tour de cou sont les plus pratiques en ce moment.
Idéalement, Mojo vise à permettre des connexions à plus longue distance à l'avenir. Cependant, le processeur monté sur le cou pourra se connecter au téléphone. Il retire le GPS du téléphone et se connecte à l'aide du modem du téléphone, faisant du tour de cou un pont.
Comment je regarde à travers l'objectif, tourne la tête. Ce n'est pas exactement la même chose que d'en porter un, mais je suis aussi proche que possible maintenant.
Lever la tête et regarder autour de moi avec des lentilles sur un bâton devant moi n'est pas la même chose que porter des lentilles de contact avec suivi oculaire. Même après cette démo, l'expérience réelle de porter des lentilles Mojo Vision dans la nature est encore inconnue. Mais même par rapport à ma dernière démo Mojo en janvier 2020, voir comment l'interface fonctionne sur la caméra rend l'expérience plus réelle.
À bien des égards, cela rappelle une paire de lunettes intelligentes appelées Focals fabriquées par North, que Google a acquises en 2020.North Focals projette un petit écran LED à l'intérieur de l'œil qui fonctionne comme une petite lecture, mais sans suivi des yeux.Je peux voir des aperçus autour de l'objectif qui peut apporter des informations, un peu comme une smartwatch sur ma tête, ou comme Google Glass… sauf différent, aussi. L'écran lumineux s'est accroché dans l'air comme une lumière gravée, puis a disparu.
J'ai vu une interface en anneau, une simulation de ce que j'ai vu sur mon casque de suivi oculaire Vive Pro VR lors de ma dernière visite à Mojo Vision à Las Vegas en 2020. Je peux voir un petit réticule tomber sur la petite icône de l'application autour de l'anneau, et rester sur une icône pendant quelques secondes l'ouvrira. L'anneau autour de la périphérie de mon champ de vision est resté invisible jusqu'à ce que je regarde vers le bord, où des widgets ressemblant à des applications sont apparus.
J'ai vu une application de voyage qui simule la recherche d'informations de vol pour un avion, et un petit graphique montrant où se trouve mon siège. Je peux jeter un coup d'œil sur d'autres fenêtres (mes informations sur le trajet Uber, ma porte d'embarquement). Un autre widget semblable à une application montre à quoi il ressemble pour voir les données de fitness contextuelles sur l'écran (fréquence cardiaque, informations sur les tours, comme les lectures de la smartwatch). Un autre widget affiche une image : Je vois un petit bébé Yoda (alias Grogu), rendu dans les tons de vert. En outre, le classique de Han Solo Images de Star Wars. Ces images montrent que l'affichage semble assez bon pour voir des images et lire du texte. L'autre est un téléprompteur qui lit du texte que je peux lire à haute voix. Lorsque j'ai détourné le regard de l'application et que je suis retourné à l'anneau extérieur, l'invite a de nouveau disparu.
Ce n'était pas facile de comprendre comment le déplacer correctement, mais je n'ai même pas essayé ces prises de vue comme je m'y attendais. Il me semble qu'elles bougent lorsque mes yeux bougent, contrôlant directement l'interface. En dehors de mes yeux, Je dois incliner la tête de haut en bas. Mojo Vision promet que l'expérience sur les yeux rendra l'affichage plus réel et remplira mon champ de vision. Cela a du sens puisque j'ai éloigné un peu le moniteur de mes yeux. L'écran se trouve juste au-dessus de ma pupille, avec sa fenêtre d'affichage étroite alignée avec la zone où se trouve la fovéa, la partie la plus détaillée du centre de notre vision. Regarder en arrière signifie fermer une application ou en ouvrir une autre.
L'objectif Mojo Vision que je regarde maintenant a définitivement plus de matériel embarqué que la version 2020 que j'ai vue auparavant, mais il n'est pas encore complètement activé. "Il a une radio, il a un écran, il a trois capteurs de mouvement, il intègre de nombreux systèmes de gestion de la batterie et de l'alimentation.Il contient toutes ces choses », m'a dit Sinclair. Mais le système d'alimentation de l'objectif n'a pas été activé pour fonctionner à l'intérieur de l'œil. Au lieu de cela, maintenant, l'objectif est fixé à une monture d'avant-bras que je tiens tout en l'alimentant. , la démo que j'essaie utilise une puce sans fil pour extraire et extraire des données de l'objectif afin de les afficher.

Lentilles De Contact VertesX
Lentilles De Contact VertesX

L'objectif de l'objectif Mojo lui-même dispose d'un petit processeur Arm Cortex M0 qui gère les données cryptées entrant et sortant de l'objectif, ainsi que la gestion de l'alimentation. L'ordinateur du tour de cou exécutera l'application, interprétera les données de suivi oculaire et mettra à jour l'image. position dans une boucle de 10 millisecondes. Alors que les données graphiques ne sont pas denses à certains égards (il s'agit d'un "élément de contenu de 300 pixels de diamètre", dit Sinclair), le processeur doit constamment mettre à jour ces données rapidement et de manière fiable. Si les choses se désynchroniser, cela peut rapidement désorienter les amateurs d'yeux.
Drew Perkins, PDG de Mojo Vision, sera le premier à porter les lentilles. Ensuite, le reste des dirigeants de la société viendra peu après, ainsi que le reste de leur équipe de direction, a déclaré Sinclair. Le partenariat de remise en forme et d'exercice annoncé par la société plus tôt cette année vise à effectuer des tests préliminaires pour voir comment les lentilles fonctionnent avec les applications de fitness et d'entraînement sportif.
Mojo Vision s'efforce également de faire en sorte que ces lentilles fonctionnent comme des appareils de vision assistée médicalement approuvés, mais ces étapes peuvent encore devoir être avancées. "Nous pouvons imaginer que les utilisateurs malvoyants disposent d'une deuxième caméra haute résolution intégrée à une paire de lunettes. , ou accrochés à leurs oreilles - ils regardent quelque chose et cela prend une photo à très haute résolution, puis c'est dans leurs yeux et ils peuvent faire un panoramique et zoomer et voir des choses », a déclaré Sinclair à propos du futur. Mojo Vision n'est pas encore là , mais tester ces micro-écrans portables de suivi oculaire sera un début.
De plus, ces lentilles nécessiteront l'approbation de la FDA en tant que lentilles de contact, un processus en cours chez Mojo Vision. Elles doivent également être fabriquées avec diverses prescriptions, et la société vise à protéger le matériel de la puce avec un iris artificiel et à rendre les lentilles plus normales.
« Nous avons du travail à faire pour en faire un produit.Ce n'est pas un produit », a souligné Sinclair à propos du placement de la lentille Mojo Vision. En tant que première personne à tenter un test intraoculaire de ces lentilles, je serais très nerveux, mais pourquoi pas ? Cette technologie n'a jamais existé auparavant. Je sais que seule une autre société, InWith, travaille sur des lentilles de contact intelligentes. Je n'ai jamais vu de démonstrations du fonctionnement de ces lentilles souples concurrentes, et celles-ci ne semblent pas encore avoir d'écrans. lunettes intelligentes de pointe obsolètes en comparaison.


Heure de publication : 22 avril 2022