AR-briller med multimodale AI-netværk får finansiering fra Pokémon GO-skaberen

Brilliant Labs afslører sine nye augmented reality-briller: Frame

I en uge, hvor gadget-entusiaster over hele verden er fortryllet af Vision Pro, forsøger en modig ung start-up at skabe en niche til sin augmented reality-enhed, som har en helt anden form end Apples. I dag annoncerede Singapore startup Brilliant Labs sit nye produkt, Frame, et par lette augmented reality-briller drevet af en multimodal AI-assistent kaldet Noa. Brillerne har fanget opmærksomheden og investeringen hos John Hanke, administrerende direktør for Niantic, den augmented reality-platform bag spil som Pokémon GO. Brilliant Labs afviste at oplyse størrelsen af ​​støtten modtaget fra Hanke.

I en videodemo set af TechCrunch bad en af ​​grundlæggerne af Brilliant Labs Noa om at præsentere sig selv ved hjælp af stemme. Efter cirka tre sekunder genererede og projicerede agenten et tekstsvar på linserne. Ud over stemmekommandoer er Noa i stand til visuel behandling, billedgenerering og oversættelse, takket være den håndfuld AI-modeller, den har integreret: konversationssøgemaskinen Perplexity AI; Stable Diffusion tekst-billede modellen fra virksomheden Stability AI; OpenAIs seneste tekstgenereringsmodel, GPT4; og Whisper stemmegenkendelsessystemet. Rammelinser har en opløsning på 640 x 400 til visning af videoer og fotos.

Med disse funktioner kan en bruger, der handler i et indkøbscenter, bede Noa om at tjekke onlinepriserne på et par sko, de kigger på gennem for eksempel Frame. “Fremtiden for menneske/AI-interaktion vil komme til live i innovative bærbare enheder, og jeg er så begejstret for at kunne bringe Perplexitys realtidsresponsmotor til Brilliant Labs Frames,” sagde Aravind Srinivas, CEO og grundlægger af Perplexity, i en pressemeddelelse.

Åbne og innovative briller

Spørgsmålet er, om Frame vil være lydhør nok til, at nogen af ​​dens AI-genererede svar kan være nyttige. Brilliant Labs’ Bluetooth-aktiverede enheder er i dag afhængige af en smartphone for at få adgang til forskellige AI-modeller. Men i sidste ende vil grundlæggerne undvære værtstelefonen og integrere lette maskinlæringsmodeller direkte i brillerne.

Ramme lanceret efter Brilliant Labs’ første produkt, Monocle, en AR-enhed med enkelt linse, der tiltrak en loyal tilhængerskare i open source-fællesskabet på grund af dens programmerbarhed og overkommelighed. En gruppe Stanford-studerende forvandlede endda enheden til en datingassistent, der kom med forslag i realtid til, hvad de skulle sige til deres date.

Frame vil forblive åben kildekode ligesom sin forgænger, hvilket betyder, at udviklere vil have adgang til ressourcer, herunder levende dokumentation, en åben kildekodebase og hardwareskemaer. De vil også være i stand til at justere indstillingerne for Noas understøttede AI-modeller.

En hyldest til historiens store skikkelser

I modsætning til den voluminøse Vision Pro er Frame designet til hverdagsbrug og leveres med receptpligtige linser. Med en vægt på 39 gram og med tykke runde nylonplastikstel er brillerne ifølge virksomheden en “hyldest til de revolutionære innovationer og ideer introduceret af historiske personer som John Lennon, Steve Jobs og Gandhi.” » Rammen vil være tilgængelig for forudbestilling fra og med i dag og sælges for $349, samme pris som Monocle. Enhederne begynder at blive sendt i april.

Siden starten i 2019 har Brilliant Labs formået at tiltrække en bemærkelsesværdig gruppe af engleinvestorer. Sidste juni rapporterede vi om dens 3 millioner dollars investering fra Brendan Iribe, medstifter af Oculus; Adam Cheyer, medstifter af Siri; Eric Migicovsky, grundlægger af Pebble og tidligere partner i Y Combinator; og andre. Hankes nye kapitaltilførsel bringer virksomhedens samlede finansiering op på 6 millioner dollars.

Kilde: www.bing.com