Fremstilling af Mojo, AR kontaktlinser, der giver dine øjne superkræfter

Ved hjælp af en skærm på størrelse med et sandkorn til at projicere billeder på nethinden kunne denne opstart hjælpe alle fra brandmænd til mennesker med dårligt syn.

Fremstilling af Mojo, AR kontaktlinser, der giver dine øjne superkræfter

Da jeg kiggede ind i brugergrænsefladen til Mojo Visions augmented reality -kontaktlinser, så jeg først ikke andet end den virkelige verden foran mig. Først da jeg kiggede over mod periferien, dukkede et lille gult vejrikon op. Da jeg undersøgte det nærmere, kunne jeg se den lokale temperatur, det aktuelle vejr og nogle vejrudsigtsoplysninger. Jeg kiggede over til positionen 9 og så et trafikikon, der gav plads til en frontal grafik, der viser potentielle kørselsruter på et simpelt kort. Klokken 12 fandt jeg min kalender og min opgaveinformation. I bunden af ​​mit syn var en simpel musikcontroller.



I stedet for at bære Mojos kontaktlinser-som endnu ikke er klar til demo-så jeg på en mock-up af en fremtidig forbrugerversion af deres interface via et VR-headset. Men pointen blev gjort. I stedet for at tilbyde de smukke hologrammer i Magic Leap- og HoloLens -headsettet, har Mojo til formål at placere nyttige data og billeder over din verden - og øge din naturlige vision - ved hjælp af teknologi, der næsten ikke kan ses. Opstarten kaldte linserne Mojo, fordi den vil bygge noget, der ligner at få superkræfter til dine øjne.

Mojos display er designet til at være nyttigt, ikke prangende. [Fotos: med tilladelse fra Mojo]



Denne dristige idé er en del af en meget større trend. I det kommende årti er det sandsynligt, at vores computerenheder bliver mere personlige og ligger tættere på - eller endda inde i - vores kroppe. Vores øjne er det logiske næste stop på rejsen. Teknikgiganter som Apple og Facebook forsøger lige nu at bygge AR -briller, der er smart nok til at bære i længere perioder. Men Mojo springer helt over ideen om briller og vælger det langt mere skræmmende mål at montere de nødvendige mikrokomponenter i kontaktlinser.



Virksomheden har været på dette siden 2015, baseret på forskning fra 2008. Og selvom det ikke forventer at bringe et færdigt produkt på markedet i yderligere to eller tre år, satser nogle kloge mennesker i Silicon Valley venturekapitalkredse på det vil alle arbejde. Mojo Vision har tiltrukket 108 millioner dollar i venturekapitalinvesteringer fra blandt andet Googles Gradient Ventures, Stanfords StartX -fond, Khosla Ventures og New Enterprise Associates (NEA).

Saratoga, Californien-baserede Mojo har beholdt sine planer om en AR-kontaktlinse under indpakning i mere end tre år. Jeg begyndte at mødes med dets centrale chefer for et år siden og holdt øje med udviklingen af ​​virksomhedens produkt og dets strategi for at bringe det til verden.

forskel mellem grund og undskyldning

Selvom Mojo stadig har udfordringer forude, siger det, at det allerede har fundet ud af de dele af dets skabelse, der måske i første omgang lyder mest som science fiction. Vi er virkelig overbeviste om, at dette fungerer, sagde Steve Sinclair, produkt- og marketingdirektør, der tidligere har været syv år hos Apple med produktplanlægning til iPhone. Derfor er vi kommet ud af stealth, fordi vi ser alle brikkerne komme sammen til et produkt, der gør alt, hvad vi vil have det skal gøre.

Dårligt syn, stor idé



Mojo Vision blev født af ideerne fra to mænd, begge dale-veteraner, der deler en dyb interesse for øjenbaseret teknologi-og som også tilfældigvis begge har dårligt syn.

Cofounder og CEO Drew Perkins havde allerede stiftet det optiske netværksfirma Infinera, der blev børsnoteret i 2007. Han medstifter og solgte også tre andre virksomheder, herunder et kabelnetværksarkitekturselskab kaldet Gainspeed. I 2012, da han var Gainspeeds administrerende direktør, udviklede han grå stær, en almindelig synslidelse, hvor hornhinden bliver sløret. Kirurgi fikseret hans fjernfelt- og nærfeltvision, men efterlod ham med et betydeligt begrænset mellemtonesyn.



Der må være en måde at give folk avanceret eller forhøjet syn uden kirurgi.

Oplevelsen fik ham til at tænke på at bruge optisk teknologi til at korrigere synsproblemer eller endda til at skubbe en persons syn ud over 20/20. Det fik ham også til at gruble over, hvordan han investerede sin tid. Den dag, Perkins afleverede sin søn til sit første år på college i San Diego, besluttede han at dreje sit professionelle liv mod at finde ud af, om det bioniske øjenkoncept virkelig kunne være muligt. Han startede salget af Gainspeed (det blev til sidst købt af Nokia) og tog et års fri.

Jeg tænkte: ’Hvordan kan jeg give folk denne form for supersyn? & Apos; han fortalte mig. Der må være en måde at give folk avanceret eller forhøjet syn uden kirurgi. Og iværksætterdelen af ​​hans sind begyndte at spekulere på, om der måske var en måde at tjene penge på at levere sådan teknologi.

Perkins vidste det ikke dengang, men en tidligere ingeniør fra Sun Microsystems, Michael Deering, havde tænkt på nogle af de samme spørgsmål. Inden han forlod Sun i 2001, havde Deering opbygget et ry som ekspert inden for kunstig intelligens, computersyn, 3D -grafik og virtual reality. Og han havde også dårligt syn. Efter solen brugte Deering et årti på at udarbejde alle problemerne med at fokusere et mikrodisplay-enten i en kontaktlinse eller implanteret i øjet-på nethinden. Gennem sin forskning og simuleringer kunne han finde svar på de mest betydningsfulde problemer - arbejde, der afspejlede sig i en stabil strøm af patenter siden 2008.

I meget af den tid havde Deering rådført sig med ex-Sun CTO Greg Papadopoulos, der nu var venturekapitalist hos NEA, om måder at lave et produkt og en forretning ud af sit arbejde. NEA havde også investeret i Gainspeed, og da Perkins kom til Papadopoulos i oktober 2015 for at tale om mulighederne for det bioniske øjenkoncept, var Papadopoulos interesseret. I slutningen af ​​mødet fortalte han Perkins om Deering. Da der åbenbart var en vis potentiel synkronicitet, mødtes de tre mænd.

Drew Perkins (til venstre) og Michael Deering [Fotos: med tilladelse fra Mojo]

Efter at Deering havde forklaret det arbejde, han havde udført, følte Perkins sig energisk. Jeg kan huske, at jeg sagde: 'Wow, han har fundet ud af det, & apos; Siger Perkins. Han var i stand til at låse op for den teknologi, der skulle eksistere for at dette kunne fungere. Deering ville blive Mojo Visions chef for videnskab.

Med Deers tiår med videnskab og Perkins erfaring med at bygge optiske teknologiprodukter havde ideen nu den kritiske masse for at blive en virksomhed. Mike Wiemer, en Stanford -ph.d., der tidligere havde grundlagt et solcellefirma, sluttede sig til som en tredje medstifter og CTO.

I efteråret 2015 havde Perkins, Deering og Wiemer valideret deres idé: Vi sagde: 'Hey, dette kunne fungere, & apos; Siger Perkins. De inkorporerede under navnet Tectus, en moniker, de ville bruge, mens de var i stealth -tilstand. I de næste par måneder udarbejdede de forretningsplanen. Da de præsenterede det for NEA, investerede firmaet $ 750.000 i frøpenge. Perkins indsatte 750.000 dollars af sig selv.

Papadopoulos fortalte mig, at indtil da var hele ideen om en øjenmonteret LED for det meste teoretisk. Deering havde udarbejdet de matematiske problemer og havde lavet nogle simuleringer, men at bygge et rigtigt produkt var en anden historie. Det ville kræve nogle særlige talenter at gøre det. Perkins siger, at han fandt de første par dusin rekrutter på steder som Apple, Amazon, HP og Google. De ville blive bedt om at opfinde noget, der aldrig var blevet bygget før, ved hjælp af teknologi, som Papadopoulos sagde, skulle kaldes ind fra fremtiden.

Hvad er der i linsen

Jeg anede ikke, at skærme ikke meget større end et sandkorn engang eksisterede. Men der var det under et mikroskops visning et billede af Albert Einstein, der stak tungen ud mod mig. Mojo's nyeste og mindste skærm klemmer den 70.000 pixels ind i et rum, der er mindre end en halv millimeter på tværs.

Dette display er centrum for Mojo -objektivet. Den er placeret direkte foran eleven, så den projicerer og fokuserer lys mod et bestemt område af nethinden på bagsiden af ​​øjet. Displayet er så lille og så tæt, at øjet næsten ikke kan se det. I det mindste i begyndelsen vil kvaliteten være mere utilitaristisk end æstetisk tiltalende - du behøver ikke fantastisk kvalitet for at udføre opgaver som f.eks. Visning af vejrinformation.

Albert Einstein gør en gæstespil på Mojos lille skærm. [Foto: høflighed af Mojo]

Displayet fokuserer sit lys på et lille indrykket område af nethinden på bagsiden af ​​øjet kaldet fovea, som vi bruger til at registrere de fine detaljer af objekter lige foran os. Denne lille fordybning fylder kun omkring 4% til 5% af nethinden, men den indeholder langt størstedelen af ​​dens nerveender. Det er tykt med fotoreceptorer, der konverterer lys til elektrokemiske signaler, som derefter overføres gennem den optiske nerve til forskellige synscentre i hjernen. Når vi bevæger os udad fra fovea, falder antallet og densiteten af ​​disse fotoreceptorer hurtigt og støt. Vi bruger disse områder med lavere opløsning på nethinden til vores perifere syn.

Al denne okulære videnskab forklarer, hvorfor Mojos skærm er praktisk. Det fremhæver lys direkte til den lille del af nethinden, der kan se det bedst. Og fordi der er så mange fotoreceptorer i fovea, har displayet brug for mindre strøm og mindre lys for at overføre billeder.

Sammen med displayet vil Mojo -objektivet indeholde en understøtning af mikrokomponenter. De første versioner vil omfatte en lille ARM-baseret processor med en enkelt kerne og en billedsensor. Senere versioner tilføjer en eye-tracking sensor og en kommunikationschip. Først vil linserne blive drevet af et lille tyndt film, solid-state batteri i linsen. Sinclair siger, at batteriet er beregnet til at vare hele dagen og vil oplades i en lille sag, der ligner en AirPods -sag. Til sidst får linserne muligvis deres strøm trådløst fra en tynd enhed, der hænger løst rundt om halsen som en halskæde. Linserne vil også være afhængige af en internetforbindelse fra en smartphone eller anden enhed til nogle af deres funktioner, såsom afsendelse og modtagelse af data.

At sætte AR på arbejde

Som enhver form for augmented reality handler det, Mojo arbejder på, kun delvist om teknologi. Det handler også om at finde værdifulde applikationer til AR. Under et besøg i november på virksomhedens kontorer så jeg noget, virksomheden udvikler for et meget specifikt sæt kunder: brandmænd.

Iført et VR -headset for at se en tidlig prototype -demo af denne linseoplevelse, så jeg en plantegning af den brændende bygning, jeg lige var kommet ind i. Gule linjer begyndte at danne konturerne af borde og stole i det røgfyldte rum. Grafiske symboler markerede placeringen af ​​andre brandmænd, selv når de blev adskilt fra mig af en væg. Tal øverst i mit syn viste mit iltbeholderniveau, kommunikationssignalstyrke og andre data. En advarsel begyndte at blinke, og instruerede mig i at komme ud af strukturen.

hvad er tusindårsalderen

Steve Sinclair [Foto: høflighed af Mojo]

Denne AR -grænseflade giver en brandmand mulighed for at se situationelle ting, mens de holder en økse eller en slange eller andet udstyr, og de ikke har tid til at trække deres telefon ud, fortalte Sinclair mig.

Mojos interesse for at bygge AR -kontaktlinser til førstehjælpere voksede, da den begyndte at tale med Motorola Solutions, den dominerende udbyder af kommunikationsteknologi til dette marked. Mojo har samarbejdet med Motorola om at definere et sæt funktioner, der kan bringe afgørende oplysninger til brandmænd og andre redningsmænd på de helt rigtige tidspunkter. Motorolas venturefond investerede også i Mojo. Sinclair fortalte mig, at Mojo taler med det amerikanske forsvarsministerium om nogle lignende scenarier for militæret, men gik ikke i detaljer.

Mojo ønsker også at lave linser til mennesker i servicebrancher. Sinclair beskriver en use case, hvor en hotel concierge problemfrit kan identificere og hilse på indkommende gæster baseret på data, der er hentet fra en database og vist i linserne.

Men den første version af Mojo -objektivet, som virksomheden siger, vil blive sendt om to til tre år, vil højst sandsynligt være en basismodel, der indeholder et kernesæt funktioner til mennesker med synshandicap. Der er 285 millioner af dem på verdensplan, ifølge Verdenssundhedsorganisationen.

Disse linser kan bruges af mennesker med forskellige former for degeneration af nethinden-det lysfølsomme lag på bagsiden af ​​øjet-og af mennesker, der oplever presbyopi, det normale tab af evne til at fokusere øjets linse på små genstande, der kommer med aldring. Mojo -objektiverne kan for eksempel registrere teksten på et vejskilt i det fjerne og vise den tydeligt. De kan forstørre objekter eller projektere dem på den del af personens nethinde, der stadig kan se godt. Linserne kan hjælpe folk med at opdage objekter foran dem ved at øge kontrasten mellem objekternes nuancer eller farver. Linserne kan også lægge grafiske linjer over de svært synlige kanter på genstande inden for brugerens syn.

En tidslinje for Mojos fremskridt hidtil, og hvad den planlægger at opnå næste gang. [Billede: høflighed af Mojo]

For nogle mennesker kan dette være livsændrende. Vi kan give dem de væsentlige værktøjer, de har brug for til mobilitet, siger Ashley Tuan, Mojo's VP for medicinsk udstyr og en af ​​fire optometere, der arbejder i virksomheden. De vil bare føle, at de er normale. De vil ikke have, at folk skal have medlidenhed med dem eller udnytte dem.

Sinclair fortalte mig, at hvert par Mojo-objektiver vil tilbyde synsforbedringsfunktioner, med sæt brugerdefinerede AR-funktioner tilføjet for at imødekomme behovene på bestemte lodrette markeder.

Da jeg første gang mødtes med Mojo for et år siden, var det stadig meget fokuseret på at udvikle teknologien i linserne, og dets planer om at matche dette produkt med bestemte markeder virkede noget flydende. Siden da er virksomheden blevet mere fokuseret på at udvikle synshjælpsfunktionerne med god grund: Den siger, at da den præsenterede linserne for Food and Drug Administration, fik den en varm modtagelse. Fordi FDA var begejstret for produktets potentiale for at hjælpe svagsynede, indrømmede det Mojo i sit gennembrudsprogram, der tilbyder en udviklingsplan, der er designet til at få linserne godkendt som medicinsk udstyr.

Fra nu af har Mojo stadig en lang vej at gå i processen med at få den certificering. Det er allerede begyndt med nogle af de undersøgelser, det skal bruge for at bevise linsernes sikkerhed og effektivitet, men det skal stadig testes i reelle kliniske forsøg. Sinclair siger, at disse tests ikke begynder i et par år mere. Da jeg besøgte virksomhedens kontorer i begyndelsen af ​​december, havde virksomheden først for nylig fået sin Institutional Review Board -certificering, så sine medarbejdere kunne teste Mojo -linserne med deres egne øjne - så det var ikke en choker, at det ikke var klar til at lad mig prøve dem selv.

Linser til forbrugere, i sidste ende

Først efter at Mojo er begyndt at markedsføre sin visionshjælp og lodrette markedslinser, planlægger den at lave linser til almindelige forbrugere. Ligesom de andre versioner af linserne vil forbrugerinkarnationen sætte nyttig digital information inden for brugerens opfattelse for at hjælpe dem med at få tingene gjort. Men oplysningerne vil mere handle om livet end arbejdet. For eksempel, hvis du forlader lufthavnen - måske med hænderne fulde af bagage - kan linserne vise pile, der peger mod din bil på parkeringspladsen. De kan sætte en markør over din Uber -tur, når den ankommer, og vise nummerpladenummer og andre oplysninger. Hvis nogen ringer på din dørklokke derhjemme, viser linserne muligvis en video af personen, der står på verandaen.

Uanset det primære formål med at bære Mojos linser, vil optometere spille en nøglerolle som distributør og portvogter. De skal måle en blivende bærers synsskarphed og formen på deres øjenkugler og derefter sende oplysningerne til Mojo, som vil oprette brugerdefinerede linser.

Det skal bevare dit privatliv, det skal være sikkert, og det skal være troværdigt.

En optometrists involvering hjælper også med at skabe tillid til Mojo og produktets sikkerhed, hvilket vil være afgørende. Mojo vil trods alt bede folk om at lægge et teknologiladet stykke plastik direkte mod deres øjenkugler. Et godkendelsesstempel fra FDA bør også gå langt mod den samme ende.

Brugere bliver ikke kun bedt om at stole på Mojo med deres øjne, men med deres data. Folk vil snart indse linsernes potentiale til at indsamle information om alle de ting, deres øjne hviler på, herunder produkter, steder, politiske annoncer og mennesker. Det vil være på Mojo at forsikre dem om, at linserne ikke registrerer disse data og deler dem med annoncører eller regeringer. Sinclair siger, at det eneste, linserne vil huske, vil være menneskelige ansigter, de måske skal genkende igen, men selv disse data gemmes kun i kort tid.

Måske mere problematisk er, at det ikke kun er bæreren, der skal overbevises om teknologiens privatliv. Personer, som brugeren kommer i kontakt med, kan være bekymrede for, at de bliver optaget. Det var et problem med Google Glass - som andre kunne fortælle dig havde på - og kunne være endnu mere brændenælde med en så usynlig teknologi som kontaktlinser.

Offentlighedens mening om den rimelige forventning om privatliv i den digitale tidsalder udvikler sig, men Mojo vil have en masse uddannelse og sikkerhed at gøre, når produktet endelig når forbrugere. Sinclair er meget bevidst om dette, især med sin baggrund hos Apple, der er besat af fortrolige oplysninger. Faktisk talte han om privatlivets fred første gang, jeg mødte ham for et år siden. Det skal bevare dit privatliv, det skal være sikkert, og det skal være troværdigt, understreger han.

Ingeniørhelt

Mojo har brugt de sidste tre år på at gøre Deersings grundlæggende arbejde - hans matematiske beviser og simuleringer - til et rigtigt fysisk produkt. Og NEAs Papadopoulos fortalte mig, at det tog mange lange dage og nogle rigtige ingeniørheltemodigheder at overvinde de tekniske barrierer, Mojo -folk stødte på undervejs - barrierer, der kunne have stoppet udviklingen af ​​linserne kolde.

Mojo clean room techs på arbejde. [Foto: høflighed af Mojo]

Ifølge Papadopoulos kæmpede tidlige medarbejdere for at undgå at tænke på alle årsagerne til, at en AR -kontaktlinse var umulig og bare komme i gang med at bygge den. Han mener nu, at Mojo er kommet ud af den periode og trådt ind på en, hvor vejen frem er i det mindste noget mindre forræderisk. Det ser låst og ladet ud, siger han. Du ved, hvad du skal gøre, og der er virkelig ikke noget, der virker skræmmende.

Hovedmålet med den tekniske indsats er nu at forene, integrere og orkestrere de forskellige mikrokomponenter. Vi har testet stort set alt uden for objektivet, og nu bliver det hele taget sammen i objektivet, siger Sinclair.

At arbejde med en utrolig lille skærm kræver noget præcisionsudstyr. [Animation: høflighed af Mojo]

er steven univers overstået?
Ved hjælp af FDA kan Mojos linser blive et visuelt hjælpeværktøj, der hjælper mange mennesker. Men deres fremtid som et almindeligt AR -produkt kan være mindre sikkert. Stort set alle virksomheder, der bygger AR eller hardware med blandet virkelighed, søger det kommercielle marked - frem for forbrugerne - efter tidlige indtægtsstrømme. Hvor mange af de erhvervskunder, der vil se kontaktlinser som en overlegen løsning på AR -briller, er stadig uvist. Og selvom forbruger -AR kan ende med at blive den næste store personlige computergrænseflade efter smartphonen, ved ingen rigtig, hvordan den vil blive.

Alt dette betyder, at Mojo - for alle de fremskridt, dens skabere allerede har gjort - fortsat er et måneskud. Det faktum, at mange virksomheder stadig kæmper for at gøre alt det i en headset , og at disse fyre i det mindste taler om at gøre det i en kontaktlinse er super interessant, siger IDG -analytiker Tom Mainelli. Farvelæg mig skeptisk, men vi tager ikke spring uden at folk tager chancer som denne. For dem, der tvivler på, at Mojo kan omdanne sit dristige koncept til virkelighed, vil kun at se tro - når virksomheden er klar til at projicere beviset lige på deres nethinder.