Møt Googles neste generasjons plattform for virtuell virkelighet

Annonse

I går, på Googles IO-konferanse, viste Google fremtiden for virtual reality - og det er ikke alt sammensatt av papp. Dette er overraskende, fordi Googles tidligere satsninger på verdensrommet har vært litt halvhjertet.

Misforstå meg ikke: Google Papp, a minimalistisk VR-skall for smarttelefoner er unektelig pent - men begrensningene er klare. Det er et av Googles berømte 20% prosjekter - et arbeid av kjærlighet fra en håndfull ansatte, og det viser. Papp har et smalt synsfelt, bevegelsesoskarphet, ingen posisjonssporing og kvalmende latenstid. Det er en oppskrift på dårlig fordypning og VR-sykdom.

Google Papp har ikke pannebånd, og det er ikke et tilsyn. Uten hodestropp må brukere holde den opp til ansiktet, og tvinger dem til å snu med torso. Det bremser dem med en merkbar etterslep. Og det er greit - vi snakker om et hodesett laget av papp. Det er fremdeles et verdifullt verktøy for å få folk inn i VR, men det er ikke en spillveksler.

Alt som begynner å endre seg. Google sysselsetter en ikke-neglisjerbar brøkdel av verdens hjernekraft, og begynte på årets IO-konferanse å flexere noe av det i VR-rommet. Kunngjøringene er tredoblet.

• For det første er det en betydelig forfining av Cardhead-headsettet.
• For det andre er det et VR-kamera designet for å produsere en sømløs 3D-opplevelse.
• Endelig er det Tango VR, en ny VR / AR-plattform bygget rundt Googles gåtefulle 3D-sensing-nettbrett.

Klar? La oss grave deg inn.

Nytt papphodesett

Det nye designet for Google Papp er en klar forbedring - det gir støtte for større telefoner (opp til 6 tommer), inkluderer iOS-støtte, og legger til en liten fysisk spak på siden av headsettet for input. Det er også designet for å være lettere å bygge og kontrollere.

Bortsett fra det er det stort sett den samme historien: små linser utenfor hylla, et pappskjell og rikelig med bevegelsessyke hvis du bruker det for lenge. Dette er en markant forbedring, men vi er ganske nær grensen for skjell i pappstil, og Google har et holdemønster til de kan begynne å bygge noe mer nyttig.

VR-kamera

Det nye kameraet som er utviklet i forbindelse med GoPro, kalles Hoppe. Den består av 16 GoPro-kameraer (totalkostnad, rundt 10.000 dollar), ordnet på et sirkulært plastfeste. Så langt, så dagligdags: lignende monteres for produserer VR-video Samsung og Oculus kunngjør "Gear VR" mobil VR-plattformSamsung-ledere og Oculus CTO John Carmack sto opp på scenen for å endelig snakke om et hemmelighetsfullt prosjekt de har arbeidet med det siste året som heter "Gear VR." Les mer er allerede på markedet. Der det blir veldig kult, er den såkalte "Jump Assembler", et programvare laget av Google for å kutte skurrende VR-gjenstander.

For å forstå denne programvaren, må du forstå problemet den prøver å løse. Oculus 'John Carmack snakker om problemer med 3D-panoramafangst.

"Det de slutter å gjøre er at du har fått skiver hentet fra flere kameraer, så rett frem er det riktig stereo [...], og her bor det riktig for denne [vinkelen]. Men det betyr at hvis du ser på hva som var riktig for øynene her borte, men du ser ut fra øyekroken her, [...] er det ikke den rette forskjellen for øynene. Og da, enda verre, hvis du [ruller hodet], blir det all slags ille, fordi det er satt opp bare for øynene rett frem. “

Hopp er en måte å fikse dette på. Google bruker maskinsynsteknologi for å sammenligne bildene sammen og finne ut 3D-geometrien til scenen. Programvaren bruker denne rekonstruksjonen for å skape et rent, maskefritt perspektiv, med perfekt stereo fra alle vinkler.

Google planlegger å la denne typen innhold vises på YouTube ved hjelp av Google Papp - selv om det ennå ikke er noe ord om støtte for mer sofistikerte VR-headset som Oculus Rift.

Det er allerede en enorm gevinst. Likevel kan teknologien brukes til å gjøre mer - mye mer. Under demonstrasjonen viser Google det virtuelle kameraet som beveger seg rundt i ringen, og jevn oppdaterer perspektivet. Akkurat nå baker Google 3D-dataene til stereopanoramaer. Illusjonen vil virke fra hvilken som helst rotasjon, men vil bryte sammen hvis du ruller hodet eller beveger deg rundt.

I fremtiden kunne Google imidlertid vise deg den rekonstruerte 3D-geometrien direkte, og gi deg en full VR-videoopplevelse. Kanskje en som støtter hver rotasjonsakse, samt en betydelig grad av posisjonssporing. Dette er ikke implementert ennå, men det er en spennende mulighet for et stort skritt fremover i VR-video.

Tango VR

Google Papp har mange problemer, men selv det beste eksemplet på mobil VR, Samsungs Gear VR-headset Samsung og Oculus kunngjør "Gear VR" mobil VR-plattformSamsung-ledere og Oculus CTO John Carmack sto opp på scenen for å endelig snakke om et hemmelighetsfullt prosjekt de har arbeidet med det siste året som heter "Gear VR." Les mer , har fremdeles en stor ulempe - ingen posisjonssporing.

Rotasjonssporing er ganske grei. Du kan bruke gyroskop for å oppdage hvor mye hodet svinger, og jordas magnetiske poler gir en praktisk referanse for å forhindre drift. Dette utgjør et par dollar sensorer, som allerede er forhåndsinstallert i de fleste smarttelefoner.

Positiv sporing er en annen plate av poutine. Ulike selskaper har taklet problemet på forskjellige måter. Oculus bruker et eksternt kamera som er koblet til sporing av prikker på headsettet, slik at det kan spores ved hjelp av maskinsyn.

HTC og Valve tar en forskjellige tilnærminger for Vive-headsettet Valve & HTC kunngjør nytt VR-headset som skal sendes innen jul 2015Valves nye VR-headset er det beste verden noensinne har sett. Står Oculus en sjanse? Les mer , bruker mange "fyrtårn" basestasjoner med roterende trommer for å feie hele rommet med laserlys. Sporerne på headsettet og kontrollerne er dekket av lyssensorer som kan oppdage (med ekstremt presis timing) når de blir truffet av den laseren. Ved å sjekke den nøyaktige timingen, og utføre noen grunnleggende geometriske beregninger, eventuelle tre sensorer kan samarbeide for å bestemme den nøyaktige plasseringen av enheten i rommet, relativt til basen stasjoner.

Begge disse tilnærmingene har fordeler, og vi kan diskutere deres relative meritter. Begge har imidlertid en ulempe som blir avgjørende i den mobile verdenen: du trenger ekstern maskinvare for å spore headsettet.

Unødvendig å si, dette er et problem for et mobilt headset. Hele poenget med mobil VR er å frigjøre deg fra kablene og infrastrukturen som trengs for høyere opplevelser på skrivebordet. Så, hva kan vi gjøre med det? Svaret, i hvert fall ifølge Google, er å bruke en teknologi som heter "Visual SLAM" (Samtidig plassering og kartlegging) i forbindelse med en dybdesensor, for å spore punkter i verden. Med dette opprettes et 3D-nettverk av miljøet for å bestemme hvor enheten befinner seg i rommet i forhold til startposisjonen.

Google har allerede sendt noen tidlig maskinvare med denne funksjonaliteten i form av Tangotablett Google ønsker å sette et 3D-kamera på smarttelefonen din - det er derforGoogles Project Tango bringer 3d-sensorer til mobile enheter. Her er hva vi vet så langt. Les mer , som vi har dekket her før. Google tror sensoren kan revolusjonere måten vi samhandler med enheter på. Som utvikler Johnny Lee uttrykker det i videoen nedenfor,

"Heller enn å tvinge hele livet inn i dette veldig lille rektangelet [av en smarttelefonskjerm], Project Tango utvikler teknologiene for å hjelpe alt og alle til å forstå nøyaktig hvor de befinner seg er. Hvor som helst. Ikke bare der det er god GPS-dekning, god WIFI-dekning [...] Enhetene vi bruker vil dele vår forståelse av plass. "

Denne teknologien har spennende applikasjoner i virtual reality, og nylig har Google begynt å vise dem frem.

Dette er imponerende, men det er også tidlige dager. Ventil bruker et hylster fra hylla for deres VR-opplevelse sammen med ærlige til Gud NERF-våpen. Nettbrettet i seg selv er ikke designet for VR - det er tungt, det er høy latens, og ergonomien er forferdelig.

Når det er sagt, er det kanskje den mest imponerende mobile VR-demoen verden noensinne har sett - strengt tatt på grunn av den posisjonssporingen den gir. Med headsettet kan du bevege deg fritt gjennom et hvilket som helst innendørsrom (forutsatt at det er nok lys til at kameraet kan se). Det åpner for noen spennende muligheter for applikasjoner med blandet virkelighet.

Mange av ulempene vil forbedre seg snart: Google har også kunngjort at det samarbeider med prosessorprodusent Qualcomm, og har laget en smarttelefon som inneholder hele prosjektets Tango-prosessorpakke, pluss maskinvaren som støtter den. Disse smarttelefonene vil være referansedesign for fremtidig Tango-kompatibel smarttelefon, som burde være mye bedre egnet til VR-applikasjoner.

Når det gjelder selve posisjonssporing, ser sporingen jevn ut. Men det som ser bra ut på en dataskjerm kan føles annerledes når du er inne i det. Microsofts HoloLens Fem spørsmål om Microsofts "Project HoloLens"Microsofts nye Augmented Reality-headset er veldig spennende - men kan de løse de grunnleggende problemene med AR? Les mer bruker en lignende teknologi for å posisjonere seg, og har merkbare svikt i stabiliteten.

I sin presentasjon nevner Johnny Lee at sporingen, under gode forhold, er nøyaktig ned til "noen få millimeter eller en centimeter". Det er imponerende, men ikke helt opp til sub-millimeterstandarden for virtual reality. Det høres ut som det kan ta en ny generasjon eller to før sporingen er god nok til å gi tethered desktop VR et løp for pengene.

Fremtiden, drevet av Google

Hvis du tar alt dette sammen, kan du begynne å se formen på noe interessant som dukker opp om to eller tre år. Tenk deg et øyeblikk at nye smarttelefoner kommer fra noen få år med Tango-maskinvare, et VR-hylster og en versjon av Android som er optimalisert for VR med lav latens. I fremtiden vil det ikke være uvanlig å se folk trygt stryke ned gaten, telefonlimt på ansiktet, fordypet i sin egen forsterkede virkelighet.

I den fremtiden er VR-kameraer overalt, og du kan på et øyeblikk hoppe inn i VR-video fra hva som helst på jorden. VR er billig, VR er allestedsnærværende, og VR er en gjennomgående komfortabel, oppslukende opplevelse, tilgjengelig for millioner av mennesker. Det er drømmen, og Google har brakt den pirrende nær virkeligheten.

Hva tror du? Er du interessert i VR-video? Kan du se deg selv kjøpe et mobilt VR-headset? Gi oss beskjed i kommentarene!