Apples nye headset kommer med en helt ny brikke.

Vision Pro kommer med nytt Apple-silisium, R1-brikken, dedikert til sanntidsdatabehandling fra alle innebygde sensorer. Den er ansvarlig for øye-, hånd- og hodesporing, forsinkelsesfri gjengivelse av brukerens miljø i videopass-through-modus og andre visionOS-funksjoner.

Ved å avlaste behandlingsbyrden fra hovedprosessoren og optimalisere ytelsen, reduserer R1 reisesyke til umerkelige nivåer, enten du bruker headsettet i utvidet virkelighet eller virtuell virkelighet modus. La oss utforske hvordan Apple R1-brikken fungerer og sammenlignet med M2-hovedbrikken, Vision Pro-funksjonene den muliggjør, og mer.

Hva er Apples R1-brikke? Hvordan virker det?

Apple R1, ikke den viktigste M2-brikken, behandler en kontinuerlig strøm av sanntidsdata til Vision Pro ved hjelp av tolv kameraer, fem sensorer og seks mikrofoner.

Bildekreditt: eple

To eksterne hovedkameraer tar opp verdenen din, og skyver over en milliard piksler til hodesettets 4K-skjermer hvert sekund. I tillegg sporer et par sidekameraer, sammen med to bunnmonterte kameraer og to infrarøde belysningsapparater, håndbevegelser fra et bredt spekter av posisjoner – selv under dårlige lysforhold.

instagram viewer

De utovervendte sensorene inkluderer også LiDAR-skanneren og Apples TrueDepth-kamera som fanger en dybdekart over omgivelsene dine, slik at Vision Pro kan plassere digitale objekter nøyaktig i din rom. På innsiden sporer en ring med lysdioder rundt hver skjerm og to infrarøde kameraer øyebevegelsene dine, som danner grunnlaget for visionOS-navigasjon.

R1 har i oppgave å behandle data fra alle disse sensorene, inkludert treghetsmåleenhetene, med umerkelig forsinkelse. Dette er av største betydning for å gjøre den romlige opplevelsen jevn og troverdig.

Hvordan er Apple R1 sammenlignet med M1 og M2?

Bildekreditt: eple

M1 og M2 er prosessorer for generell bruk optimalisert for Mac-datamaskiner. R1 er en koprosessor med smalt fokus designet for å støtte jevne AR-opplevelser. Den gjør jobben sin raskere enn M1 eller M2 kunne, noe som gir deg fordeler som en forsinkelsesfri opplevelse.

Apple har ikke spesifisert hvor mange CPU- og GPU-kjerner R1 har, og heller ikke detaljert CPU-frekvensen og RAM-en, noe som gjør en direkte sammenligning mellom R1, M1 og M2 vanskelig.

R1s primære domener er øye- og hodesporing, håndbevegelser og sanntids 3D-kartlegging via LiDAR-sensoren. Ved å laste ned disse beregningsintensive operasjonene kan M2 kjøre de forskjellige visionOS-undersystemene, algoritmene og appene effektivt.

Nøkkelfunksjonene til Vision Pros R1-brikke

R1 har disse nøkkelegenskapene:

  • Rask behandling: De spesialiserte algoritmene og bildesignalbehandlingen i R1 er optimalisert for å forstå sensor-, kamera- og mikrofoninnganger.
  • Lav ventetid: Optimalisert maskinvarearkitektur gir svært lav ventetid.
  • Strømeffektivitet: R1 håndterer et bestemt sett med oppgaver mens den bruker minimalt med energi, takket være dens effektive minnearkitektur og TSMCs 5nm produksjonsprosess.

På minussiden bidrar Vision Pros dual-chip-design og R1s sofistikerte til hodesettets høye pris og to timers batterilevetid.

Hvilke fordeler gir R1 til Vision Pro?

R1 muliggjør presis øye- og håndsporing som "bare fungerer." For å navigere i visionOS, for eksempel, retter du blikket mot knapper og andre elementer.

Bildekreditt: eple

Vision Pro bruker håndbevegelser for å velge elementer, bla og mer. Sofistikasjonen og presisjonen til øye- og håndsporing har gjort det mulig for Apples ingeniører å lage et hodesett med blandet virkelighet som ikke krever fysiske kontroller.

R1s sporingspresisjon og minimale forsinkelse muliggjør tilleggsfunksjoner, som luftskriving på det virtuelle tastaturet. R1 driver også pålitelig hodesporing – avgjørende for å skape et romlig databehandlingslerret rundt brukeren. Igjen, presisjon er nøkkelen her – du vil at alle AR-objekter skal beholde sin posisjon uansett hvordan du vipper og snur hodet.

Bildekreditt: eple

Romlig bevissthet er en annen faktor som bidrar til opplevelsen. R1 tar dybdedata fra LiDAR-sensoren og TrueDepth-kameraet, og utfører 3D-kartlegging i sanntid. Dybdeinformasjon lar headsettet forstå miljøet, som vegger og møbler.

Dette er igjen viktig for AR-utholdenhet, som refererer til den faste plasseringen av virtuelle objekter. Det hjelper også Vision Pro med å varsle brukeren før de støter på fysiske objekter, og bidrar til å redusere risikoen for ulykker i AR-applikasjoner.

Hvordan reduserer R1 Sensor Fusion AR-bevegelsessyke?

Vision Pros design med to brikker avlaster sensorbehandling fra hoved-M2-brikken, som kjører visionOS-operativsystemet og appene. Ifølge Pressemelding fra Vision Pro, strømmer R1 bilder fra de eksterne kameraene til de interne skjermene innen 12 millisekunder, eller åtte ganger raskere enn et øyeblink, noe som minimerer forsinkelsen.

Lag refererer til ventetiden mellom det kameraene ser og bildene som vises på hodesettets 4K-skjermer. Jo kortere etterslep, jo bedre.

Reisesyke oppstår når det er et merkbart etterslep mellom input som hjernen din mottar fra øynene dine og det det indre øret ditt sanser. Det kan oppstå i mange situasjoner, inkludert i en fornøyelsespark, på en båt- eller cruisetur, mens du bruker en VR-enhet osv.

VR kan gjøre folk syke på grunn av sansekonflikt, noe som resulterer i kjøresykesymptomer som desorientering, kvalme, svimmelhet, hodepine, belastning på øynene, sitteplasser, oppkast og andre.

VR kan også være dårlig for øynene dine på grunn av belastning på øynene, hvis symptomer inkluderer såre eller kløende øyne, dobbeltsyn, hodepine og sår nakke. Noen mennesker kan føle ett eller flere av slike symptomer i flere timer etter at de har tatt av hodesettet.

Som en tommelfingerregel bør en VR-enhet oppdatere skjermen minst 90 ganger per sekund (FPS), og skjermforsinkelsen bør være under 20 millisekunder for å unngå å gi folk reisesyke.

Med den angitte forsinkelsen på bare 12 millisekunder, reduserer R1 forsinkelsen til et umerkelig nivå. Mens R1 hjelper til med å minimere effekten av reisesyke, rapporterte noen Vision Pro-testere symptomer på reisesyke etter å ha brukt hodesettet i over 30 minutter.

Spesialiserte Apple Silicon Co-prosessorer gir store fordeler

Apple er ikke fremmed for spesialiserte prosessorer. Gjennom årene har silisiumteamet produsert mobile og stasjonære brikker som er misunnelse av industrien.

Apple silisiumbrikker er avhengige av spesialiserte koprosessorer for å håndtere spesifikke funksjoner. Secure Enclave administrerer for eksempel biometriske data og betalingsdata på en sikker måte, mens Neural Engine akselererer AI-funksjoner uten å ødelegge batteriet.

De er perfekte eksempler på hva som kan oppnås ved å ha en svært fokusert koprosessor for det riktige settet med oppgaver vs. bruker hovedprosessoren til alt.