Styring av Vision Pro AR/VR-hodesettet: 6 håndbevegelser for å navigere i visionOS

Vision Pro endrer paradigmet for hvordan folk navigerer og samhandler med programvare i blandet virkelighet. I stedet for å kreve klønete fysiske kontrollere, er Apples AR/VR-headset avhengig av sofistikerte inngangsmekanismer vi alle er født med – våre hender og øyne.

Gjør valg, rull, zoom, roter, flytt ting rundt og mer bare ved å se på ting og utføre enkle håndbevegelser som minner om Multi-Touch på iPhone.

Følg med for å utforske de seks grunnleggende håndbevegelsene som brukes gjennom visionOS og lær hvordan blikket og hendene dine gjør bruk av Apples romlige datamaskin sømløst og uanstrengt.

Hvordan fungerer Vision Pros håndbevegelser?

Håndbevegelser i visionOS fungerer sammen med øyesporing. Øynene dine gir målretting og intensjon, og bevegelser utløser spesifikke handlinger. Vision Pro-funksjonene front-, side- og bunnmonterte kameraer for håndsporing, og infrarøde sensorer inne i headsettet sporer øynene dine.

Du ser på et element på skjermen – som en knapp – for å markere det eller holde blikket for å utvide den underliggende kontekstuelle menyen eller avsløre et verktøytips. Med valget gjort, utfør en gest som å klype for å handle på den. Fordi de eksterne kameraene dekker et bredt synsfelt, kan du utføre bevegelser mens du hviler hånden komfortabelt i fanget for å unngå belastning.

Apple har skissert seks vanlige typer håndbevegelser for visionOS i en WWDC23 utviklerprat om å designe hånd- og øyeinteraksjoner for romlig input. Sammen med øyne for målretting lar disse håndbevegelsene deg kontrollere apper og interaksjoner på tvers av systemet.

Trykk på

Hvis du klemmer fingrene sammen, utføres standardhandlingen på det valgte elementet. Tenk på å knipe i form av å trykke på iPhone-skjermen eller klikke på Mac-musen eller styreflaten. Noen visionOS-funksjoner, for eksempel luftskriving på det virtuelle tastaturet, krever ikke trykkbevegelsen.

Dobbelttrykk

Klyp sammen tommelen og pekefingeren to ganger i rask rekkefølge for å utføre tilsvarende dobbelttrykk-bevegelsen i operativsystemer som iOS og iPadOS.

Klyp og hold

Ta tommelen og pekefingeren sammen og hold dem et øyeblikk for å utløse denne gesten. Klyp og hold i visionOS fungerer på samme måte som lang-trykk (trykk og hold) bevegelse på iPhone for å fremheve tekst eller få frem kontekstmenyen.

Beveg de klemte fingrene for å flytte vinduer og andre brukergrensesnittelementer i visionOS. Hvis Safari er foran deg, kan du også holde hånden i været og bare bla med fingeren.

Klyp og dra

Knip og dra-bevegelsen brukes til å rulle. Bare ta fingrene sammen og svir med håndleddet. Du kan bla opp, ned, til venstre eller høyre ved å dra hånden i en hvilken som helst retning.

Jo raskere du beveger hånden, desto raskere ruller du. Du kan bla gjennom nettsider i Safari, e-poster i Mail, dokumenter i Pages, regneark i Excel, etc. Du kan bruke klype- og drabevegelsen til å rulle innhold i et hvilket som helst vindu på visionOS som støtter rulling.

Zoom

For å zoome inn Safari, Bilder og andre apper, klem tommelen og pekefingrene på begge hendene sammen, og flytt deretter hver utover. Du kan bruke denne bevegelsen til å bringe et vindu i visionOS lenger eller nærmere, forstørre bilder og mer. I Bilder-appen kan du se på en bestemt del av et bilde når du utfører zoombevegelsen for å zoome inn på det.

Rotere

For å rotere et element, klyp fingrene med begge hendene tett sammen, og flytt deretter den ene hånden oppover og den andre nedover. Du kan bruke denne bevegelsen til å rotere 3D-objekter i Quick Look, bilder i Bilder-appen, illustrasjoner i dokumenter og så videre.

Øye- og håndsporing "Bare fungerer" på Vision Pro

Som på iPhone tilbyr Apple et grunnleggende gestspråk for å navigere gjennom hele visionOS-brukergrensesnittet og appene for utvidet virkelighet. Tredjepartsutviklere kan utnytte Apples offisielle API-er for visionOS for å lage og legge til gester til appene deres.

Apple anbefaler ikke å lage tilpassede bevegelser som kolliderer med systembevegelsene eller de som ikke er enkle å forstå, utføre eller huske.

Øye- og håndsporing i virtuelle, utvidede og blandede virkelighetsapplikasjoner er ikke nye funksjoner. Imidlertid implementerer Vision Pro-hodesettet disse funksjonene på Apples varemerkemåte. Som et resultat er det sømløst og uanstrengt å navigere i visionOS med øynene og hendene.