Hands-on: de slimme contactlens van Mojo Vision is verder dan je zou denken

Omdat ik tot voor kort niet de kans had gehad om de nieuwste slimme contactlens van Mojo Vision zelf te zien, moet ik toegeven dat ik verwachtte dat het bedrijf nog jaren verwijderd was van een werkende contactlens met meer dan alleen een eenvoudig meldingslampje of een handvol statische pixels. Toen ik door het nieuwste prototype van het bedrijf keek, was ik onder de indruk een veel capabeler prototype te zien dan ik had verwacht.

Toen ik binnenkwam Mojo Vision's demo-suite op AWE 2022 vorige maand kreeg ik een harde contactlens waarvan ik aannam dat het een mock-up was van de technologie die het bedrijf hoopte uiteindelijk te verkleinen en in de lens te passen. Maar nee... het bedrijf zei dat dit een functioneel prototype was en dat alles in de lens echte, werkende hardware was.

Het bedrijf vertelt me ​​dat dit nieuwste prototype het "kleinste" MicroLED-scherm ter wereld omvat - met een minuscule 0.48 mm, met slechts 1.8 micron tussen pixels - een ARM-processor, 5GHz-radio, IMU (met versnellingsmeter, gyro en magnetometer), "medische- hoogwaardige microbatterijen' en een stroombeheercircuit met componenten voor draadloos opladen.

En hoewel de slimme contactlens van Mojo Vision nog steeds veel dikker is dan uw typische contactlens, heeft het bedrijf vorige week aangetoond dat dit prototype in een echt menselijk oog kan werken, met Mojo Vision CEO Drew Perkins als proefkonijn.

En hoewel dit er best eng uitziet als het in het oog wordt gedragen, vertelt het bedrijf me dat ze het niet alleen dunner maken, maar ook de elektronica bedekken met cosmetische irissen om het er in de toekomst natuurlijker uit te laten zien.

Bij AWE kon ik de contactlens niet in mijn eigen oog doen (Covid be damned). In plaats daarvan had het bedrijf de lens bevestigd aan een vastgebonden stok die ik tegen mijn oog hield om er doorheen te kijken.

Toen ik dat deed, was ik verrast om meer te zien dan alleen een handvol pixels, maar een volledige grafische gebruikersinterface met leesbare tekst en interface-elementen. Het is voorlopig allemaal monochroom groen (waarbij gebruik wordt gemaakt van het vermogen van het menselijk oog om groen beter te zien dan welke andere kleur dan ook), maar de demo laat duidelijk zien dat de ambities van Mojo Vision meer zijn dan alleen maar een luchtkasteel.

Ondanks dat het fysieke display in de lens zelf ondoorzichtig is en direct in het midden van je oog, kun je het niet echt zien omdat het gewoon te klein en te dichtbij is. Maar je kunt het beeld zien dat het projecteert.

Vergeleken met elke HMD die tegenwoordig bestaat, is de slimme contactlens van Mojo Vision bijzonder interessant omdat hij beweegt met je oog. Dat betekent dat het scherm zelf, ondanks een zeer klein gezichtsveld van 15°, meebeweegt met uw zicht terwijl u rondkijkt. En het is altijd scherp, waar je ook kijkt, omdat het zich altijd boven je fovea bevindt (het middelste deel van het netvlies dat de meeste details ziet). In wezen is het alsof je een 'ingebouwde' weergave hebt. Een beperkt gezichtsveld blijft een knelpunt voor veel gebruiksscenario's, maar als het scherm daadwerkelijk met je oog meebeweegt, wordt de beperking op zijn minst enigszins verlicht.

Maar hoe zit het met de invoer? Mojo Vision is ook gestaag aan het werk geweest om uit te zoeken hoe gebruikers met het apparaat zullen omgaan. Omdat ik de lens niet in mijn eigen oog kon plaatsen, zette het bedrijf me in plaats daarvan in een VR-headset met eye-tracking om na te bootsen hoe het zou zijn om de slimme contactlens zelf te gebruiken. In de headset zag ik ongeveer dezelfde interface die ik had gezien door de demo-contactlens, maar nu kon ik met mijn ogen communiceren met het apparaat.

De huidige implementatie beperkt niet de hele interface tot het kleine gezichtsveld. In plaats daarvan fungeert je blik als een soort 'schijnwerper' die een grotere interface onthult terwijl je je ogen beweegt. U kunt met delen van de interface communiceren door uw blik op een knop te houden om dingen te doen zoals het huidige weer of recente sms-berichten.

Het is een interessante en handsfree benadering van een HMD-interface, hoewel in mijn ervaring de ogen zelf geen geweldig bewust invoerapparaat zijn omdat de meeste van onze oogbewegingen onbewust worden gecontroleerd. Met voldoende oefening is het mogelijk dat het handmatig bedienen van je blik voor invoer net zo eenvoudig en naadloos wordt als het gebruik van je vinger om een ​​touchscreen te bedienen; uiteindelijk is een andere vorm van input misschien beter, maar dat valt nog te bezien.

Deze interface- en invoeraanpak is natuurlijk volledig afhankelijk van hoogwaardige eye-tracking. Aangezien ik de lens niet voor mezelf heb kunnen opzetten, heb ik geen indicatie of de eye-tracking van Mojo Vision de taak aankan, maar het bedrijf beweert dat de eye-tracking een "orde van grootte nauwkeuriger is dan de huidige toonaangevende [ XR] optische eye-tracking-systemen.”

In theorie zou het zo goed moeten werken als ze beweren - wat is tenslotte een betere manier om de beweging van je ogen te meten dan met iets dat er fysiek aan vastzit? In de praktijk is de IMU van het apparaat vermoedelijk net zo gevoelig voor drift als alle andere, wat problematisch zou kunnen zijn. Er is ook de kwestie van het extrapoleren en scheiden van de beweging van het hoofd van de gebruiker van sensorgegevens die afkomstig zijn van een op het oog gemonteerd apparaat.

If de eye-tracking van het bedrijf is net zo nauwkeurig (en accuraat) zoals ze beweren, zou het een grote overwinning zijn omdat het het apparaat in staat zou kunnen stellen als een echte AR contactlens die in staat is tot meeslepende ervaringen, in plaats van alleen een slim contactlens voor elementaire informatieweergave. Mojo Vision beweert wel dat het verwacht dat zijn contactlens uiteindelijk in staat zal zijn om meeslepende AR te doen, inclusief stereoscopische weergave met één contact in elk oog. In ieder geval zal AR niet goed bruikbaar zijn op het apparaat totdat een groter gezichtsveld is bereikt, maar het is een opwindende mogelijkheid.

Dus wat is de routekaart om dit ding daadwerkelijk op de markt te krijgen? Mojo Vision zegt dat het volledig verwacht dat goedkeuring door de FDA nodig zal zijn voordat ze het aan iemand kunnen verkopen, wat betekent dat zelfs als alles functioneel is vanuit een technisch en functiestandpunt, ze klinische proeven moeten uitvoeren. Wat betreft wanneer dat allemaal voltooid zou kunnen zijn, vertelde het bedrijf me "niet binnen een jaar, maar zeker [eerder dan] vijf jaar."