Microsoft viser frem nye HoloLens-demonstrasjoner på Build Conference

Annonse

Microsofts kommende HoloLens-headset er den første high-end augmented reality-enheten som er blitt vist for publikum. Dessverre har Microsoft blitt så tette at vi ikke egentlig vet mye om det.

I dag, kl Microsofts Build Developer Conference i San Francisco, fikk vi et nytt pirrende blikk på teknologien. Demo i seg selv er skinnende, men ikke veldig informativ. Vi kan imidlertid plukke ut noen viktige detaljer ved å lese mellom linjene. I dette tilfellet er det Microsoft valgte å ikke vise mer informativt enn det de gjorde.

Demoen

Flere av HoloLens ingeniører kom på scenen for å vise frem noen av de nye demoene de har utviklet for maskinvaren. En demo finner sted som en rekreasjon av en ingeniørs deprimerende sparsomme leilighet, og dekker vegger og gulv med virtuelle apper og leker. En annen bringer inn noen leger for å vise en modell av en menneskekropp, og tar den deretter fra hverandre. Endelig vokser en kitrobot et uttrykksfullt, virtuelt overkropp og bretter ut et stort statuspanel, slik at det kan finjusteres i sanntid.

Djevelen, detaljene

Så langt, så imponerende - men mange av de første spørsmål om HoloLens Fem spørsmål om Microsofts "Project HoloLens"Microsofts nye Augmented Reality-headset er veldig spennende - men kan de løse de grunnleggende problemene med AR? Les mer forbli ubesvart. Så la oss se litt nærmere på.

okklusjon

Føles demoen litt iscenesatt for deg? Se kamerabevegelsene nøye. Det er ikke bare den vanlige messen. Se på demoen igjen, og se etter øyeblikk der et menneske passerer foran et virtuelt objekt.

Dette kalles okklusjon, og det er et vanskelig problem i den utvidede virkeligheten. For å gjengi dette fenomenet på riktig måte, må HoloLens kartlegge verden raskt og nøyaktig nok til å kutte personens silhuett ut av det virtuelle bildet. Ellers har du en dybdekonflikt: stereovisjonen din forteller deg at det virtuelle objektet er bak personen, men det vises på toppen av dem. Som vi har lært av virtuell virkelighet, er denne typen konflikter opprørende, og ødelegger illusjonen om at gjenstandene du samhandler med er håndfaste deler av verden.

Demonstrasjonen går i betydelig lengde for å forhindre dette. Du kan se kameraoperatøren reagere når en av personene på scenen beveger seg mot et virtuelt objekt og beveger seg for å hindre dem i å overlappe hverandre. Hele demoen er utførlig koreografert. Å komme ut av stolen i den første demoen får fyren på scenen til å tråkke foran en virtuell robot - og praktisk, er kameraet pekt et annet sted i akkurat det øyeblikket.

De roter det bare noen ganger. Under robotdemoen passerer roboten kort foran noen få virtuelle prikker på gulvet, og en av presentatørene tråkker på dem. I begge tilfeller er det en dybdekonflikt: du fortsetter å se de virtuelle prikkene gjennom de virkelige objektene, noe som betyr at Microsoft ennå ikke har en løsning på dette problemet.

Vi kan se flere bevis på dette i den samme demonstrasjonen når en visualisering vises av headsetets kart over miljøet. Hvis du ramser for ramme gjennom den og ser nøye, kan du se at kartet er feil på flere måter: bordet er på en hevet plattform, som blir en vag bule i kartet. Roboten er på samme måte synlig på kartet, men bare som en liten klump. Kantene på skrivebordet mangler. Du kan sannsynligvis skylde på disse problemene på den begrensede oppløsningen av Kinect-dybdesensoren inne i headsettet. Uansett er det bare ikke nok presisjon her til å okkludere virtuelle objekter riktig.

La oss være tydelige her: dette kan være en showstopper. Hensikten med HoloLens er å sømløst kombinere virkelige og virtuelle objekter på en overbevisende måte. Okklusjon er en nødvendig del av illusjonen. Okklusjon er en så kraftig dybde-indikasjon at å legge en enkel hvit linje til en video kan skape en kraftig 3D-effekt av seg selv.

Microsoft er tydelig klar over dette. De viser okklusjon i reklamemateriellet. Likevel ser det ikke ut som om de kan gjøre det fra demoene sine. Hvis Microsoft ikke kan løse dette problemet, har de ikke et produkt. Brukere bor ikke i detaljerte koreograferte demoer i tomme hjem. De tåler ikke konstante, nedbrytende gjengivelsesfeil. Jeg er ærlig talt overrasket over at mer av teknisk presse ikke snakker om dette problemet. Jeg er veldig nysgjerrig på om Microsoft har noen plan for å løse dette problemet.

Brukergrensesnitt

Hver gang jeg ser på en video som viser HoloLens UI, var uttrykket som fortsetter gjennom hodet mitt "Vil vi virkelig gjøre dette igjen?"

Med hver nye databehandlingsplattform, både PC og smarttelefoner, går vi gjennom en syklus med dårlig brukergrensesnitt før vi finner ut av det. Problemet er at de dårlige brukergrensene er dårlige på nøyaktig de samme måtene, og de er dårlige på den måten som HoloLens UI er dårlig. Jeg skulle ønske at vi for en gangs skyld kunne kjenne igjen mønsteret og hoppe videre til den gode delen. Dette er hva HoloLens (og hver nye plattform) gjør galt:

• Først prøver de å skape gamle paradigmer, i stedet for å skape nye. Tenk på de gamle Treo-smarttelefonene som var bygget rundt et fysisk tastatur og en musemulerende pekepenn. HoloLens er nøyaktig det samme, bruker hodet til å etterligne en mus, og fingeren for å klikke. Pokker, på et tidspunkt "drar" ingeniøren et vindu ved å låse det på hodet, noe som Oculus VR Veiledning for beste praksis advarer eksplisitt mot. HoloLens er ikke en PC, og det å prøve å bruke en PC UI kommer ikke til å fungere.
• For det andre blir de pakket sammen i de blanke delene av grensesnittet, og skaper utsmykkede, ubrukelig myke. Husker du Clippy? Microsoft Bob? Fuskeskinnet på den gamle iOS-notatappen? Dette er ubrukelig visuelt rot. Den virtuelle hunden og fiskeskålen og roboten er nøyaktig den samme tingen. Hvor mange ganger må vi gjøre dette før vi innser at minimalisme er den eneste gode ideen?

Mens vi er inne på det, er "hologrammene" i seg selv en rot visuelt. De kan ikke bestemme om de er rene ruter eller klønete tegneserieklatter. UI-elementene er altfor store, og krever ekspansive bevegelser å bruke, til og med fysisk vandring, noe som er dårlig design av mange grunner.

Hvis det virker som om jeg er opprørt over dette, skyldes det at oppslukende brukergrensesnitt til slutt kommer til å bli skikkelig kule en dag. HoloLens-brukergrensesnittet som er blitt vist så langt, er et fullstendig rot, og det er synd. Et godt brukergrensesnitt er forskjellen mellom Treo og iPhone - mellom en IBM-hovedramme og den originale PC-en med mus og tastatur. Det er forskjellen mellom et leketøy for nerder og en verdensforandrende innovasjon.

Formfaktor

Det er et stort stykke gode nyheter. Microsoft tok med hundrevis av HoloLens-enheter til showet, og viser dem frem for deltakere. Forrige gang Microsoft gjorde demonstrasjoner, ble folk fanget i voluminøse kablede hodesett. Headsetene som ble brukt på scenen var rekvisitter som bare kunne vise et svart / hvitt-bilde med lav oppløsning. Imidlertid uttaler programlederen tydelig at headsetene "bare liker de du så på scenen i dag." I andre ord, Microsoft har vellykket miniaturisert HoloLens maskinvare for å passe inn i en bærbar formfaktor, noe som er flott nyheter.

Her er en utvikler erfaring med den nye maskinvaren:

“Jeg gikk‘ på byggeplassen ’, og de lagde tegningene på veggen. Da kunne jeg se hvordan en dør ville se ut og legge merke til at en bjelke var i veien. Vi flyttet døren bort og la deretter til et lag med elektrisk og rørleggerarbeid, og så at et rør nå var i veien. Jeg ‘stirret og lufta klikket’ på røret og la en stemmemelding for rørleggeren for å flytte røret bort.

Så kom jeg tilbake i rollen som rørlegger og hentet lappen min (den hang der), stirret og klikket og hørte min egen innspilte stemme.

Å ha på enheten trenger litt å bli vant til. Den var ikke superjustert og presset litt på nesa. Men jeg tror jeg kan justere det bedre i tide.

Det holografiske området er mindre omfattende enn jeg trodde. Det er et rektangel foran øynene dine, men hvis du har et godt sidesyn (som jeg har), er det litt foruroligende fordi hologrammet blir beskåret når du beveger hodet.

Alt i alt er det ekstremt imponerende, og jeg kan ikke vente med å utvikle meg for det. ”

Mens forfatteren gjør oppmerksom på at enheten fremdeles har et lite synsfelt, virker han imponert over maskinvaren generelt, noe som er et lovende tegn. Etter hvert kommer AR til å bli en kraftigere og fleksibel erstatning for VR - noe som allerede er en fantastisk teknologi Hvorfor Virtual Reality Technology vil blåse tankene dine om 5 årFremtiden til virtual reality inkluderer hode-, øye- og uttrykkssporing, simulert berøring og mye mer. Disse fantastiske teknologiene vil være tilgjengelige for deg om 5 år eller mindre. Les mer . Det store spørsmålet er - hvor langt borte er vi?

Utviklerstøtte

Selv om det ikke ble nevnt i kunngjøringsvideoen, kunngjorde Microsoft det også, gjennom sitt partnerskap med Enhet, det vil også være full støtte for HoloLens in Unity, et av de vanligste verktøyene som brukes til indie-spill utvikling. Støtten vil omfatte muligheten til å gjengi gjennom HoloLens, og å få innspill fra enheten på forskjellige måter. Både Unity Free og Unity Pro vil ha gratis HoloLens-støtte. Selv om integrasjonen ikke er fullført ennå, gir Microsoft allerede korte kurs på Build konferanse med prototypen Unity-integrasjoner, for å gi utviklere en første titt på hva koding for AR vil være som.

Dette er et kjærkomment, men ikke overraskende trekk. Enhver ny plattform lever eller dør av kvaliteten på lanseringsinnholdet, og HoloLens vil ikke være noe unntak. Dessuten har Microsoft det alltid vært forpliktet til utvikler relasjoner.

Prototypefeber

HoloLens slynger seg sakte mot kommersiell virkelighet. Jeg har dypt forbehold om noen av maskinens begrensninger, men enheten er unektelig kul 8 Real-World bruk for Microsoft HoloLensMicrosofts HoloLens er kult, men hva vil du faktisk bruke det til? Vi løper ned de mest spennende mulighetene. Les mer , og noe sånt vil en dag være veldig nyttig. Er du spent på HoloLens?Fikk du sjansen til å prøve en på konferansen? Vil du bare ha en virtuell fiskebolle? Gi oss beskjed i kommentarene!