Što je Appleov R1 čip i kakav je u usporedbi s M1 i M2?

Vision Pro donosi novi Appleov silikon, R1 čip, posvećen obradi podataka u stvarnom vremenu sa svih ugrađenih senzora. Odgovoran je za praćenje očiju, ruku i glave, renderiranje korisničkog okruženja bez kašnjenja u video prolaznom načinu rada i druge značajke visionOS-a.

Skidanjem tereta obrade s glavnog procesora i optimiziranjem performansi, R1 smanjuje mučnina kretanja do neprimjetnih razina, bilo da koristite slušalice u proširenoj ili virtualnoj stvarnosti način rada. Istražimo kako Appleov R1 čip radi i usporedimo ga s glavnim M2 čipom, Vision Pro značajkama koje on omogućuje i više.

Što je Appleov R1 čip? Kako radi?

Apple R1, a ne glavni M2 čip, obrađuje kontinuirani tok podataka u stvarnom vremenu za Vision Pro pomoću svojih dvanaest kamera, pet senzora i šest mikrofona.

Dvije glavne vanjske kamere snimaju vaš svijet, gurajući više od milijardu piksela na 4K zaslone slušalica svake sekunde. Povrh toga, par bočnih kamera, zajedno s dvije donje postavljene kamere i dva infracrvena osvjetljivača, prate pokrete ruku iz širokog raspona položaja – čak i u uvjetima slabog osvjetljenja.

Senzori okrenuti prema van također uključuju LiDAR skener i Appleovu TrueDepth kameru koja snima mapu dubine vašeg okruženja, omogućujući Vision Pro precizno pozicioniranje digitalnih objekata u vašem prostor. S unutarnje strane, prsten LED dioda oko svakog zaslona i dvije infracrvene kamere prate vaše pokrete očiju, što čini osnovu navigacije visionOS.

R1 ima zadatak obraditi podatke sa svih tih senzora, uključujući inercijske mjerne jedinice, s neprimjetnim kašnjenjem. Ovo je od iznimne važnosti u smislu glatkog i uvjerljivog doživljaja prostora.

Kakav je Apple R1 u usporedbi s M1 i M2?

M1 i M2 su procesori opće namjene optimizirani za Mac računala. R1 je koprocesor uskog fokusa dizajniran za podršku glatkim AR iskustvima. Svoj posao radi brže nego što bi mogli M1 ili M2, dopuštajući pogodnosti poput iskustva bez zastoja.

Apple nije precizirao koliko CPU i GPU jezgri ima R1 niti je detaljno opisao CPU frekvenciju i RAM, što otežava izravnu usporedbu između R1, M1 i M2.

Primarne domene R1 su praćenje očiju i glave, geste rukama i 3D mapiranje u stvarnom vremenu putem LiDAR senzora. Rasterećenje tih računalno intenzivnih operacija omogućuje M2 učinkovito pokretanje različitih visionOS podsustava, algoritama i aplikacija.

Ključne značajke R1 čipa Vision Pro

R1 ima ove ključne mogućnosti:

• Brza obrada: Specijalizirani algoritmi i obrada signala slike u R1 optimizirani su za razumijevanje ulaza senzora, kamere i mikrofona.
• Niska latencija: Optimizirana hardverska arhitektura rezultira vrlo niskom latencijom.
• Učinkovitost energije: R1 se nosi s određenim skupom zadataka uz minimalnu potrošnju energije, zahvaljujući svojoj učinkovitoj memorijskoj arhitekturi i TSMC-ovom 5nm proizvodnom procesu.

S druge strane, dizajn Vision Pro s dva čipa i sofisticiranost R1 doprinose visokoj cijeni slušalica i trajanju baterije od dva sata.

Koje pogodnosti R1 donosi Vision Pro?

R1 omogućuje precizno praćenje očiju i ruku koje "jednostavno radi". Za navigaciju visionOS-om, na primjer, usmjeravate pogled na gumbe i druge elemente.

Vision Pro koristi geste rukama za odabir stavki, pomicanje i još mnogo toga. Sofisticiranost i preciznost praćenja očiju i ruku omogućili su Appleovim inženjerima da stvore slušalice miješane stvarnosti koje ne zahtijevaju fizičke kontrolere.

Preciznost praćenja i minimalno kašnjenje modela R1 omogućuju dodatne značajke, poput tipkanja iz zraka na virtualnoj tipkovnici. R1 također omogućuje pouzdano praćenje glave—ključno za stvaranje prostornog računalnog platna koje okružuje korisnika. Opet, preciznost je ključna ovdje - želite da svi AR objekti zadrže svoj položaj bez obzira na to kako nagnete ili okrenete glavu.

Svijest o prostoru još je jedan čimbenik koji doprinosi iskustvu. R1 uzima podatke o dubini od LiDAR senzora i TrueDepth kamere, izvodeći 3D mapiranje u stvarnom vremenu. Informacije o dubini omogućuju slušalicama da razumiju svoje okruženje, poput zidova i namještaja.

To je pak važno za postojanost AR-a, što se odnosi na fiksno postavljanje virtualnih objekata. Također pomaže Vision Pro obavijestiti korisnika prije nego što naleti na fizičke objekte, pomažući smanjiti rizik od nezgoda u AR aplikacijama.

Kako R1 Sensor Fusion ublažava AR bolest kretanja?

Vision Pro dizajn s dva čipa rasterećuje obradu senzora s glavnog M2 čipa, koji pokreće visionOS operativni sustav i aplikacije. Prema Vision Pro priopćenje za javnost, R1 prenosi slike s vanjskih kamera na unutarnje zaslone unutar 12 milisekundi, ili osam puta brže od treptaja oka, minimizirajući kašnjenje.

Kašnjenje se odnosi na latenciju između onoga što vide kamere i slika prikazanih na 4K zaslonima slušalica. Što kraći odmak, to bolje.

Mučnina kretanja događa se kada postoji zamjetan odmak između informacija koje vaš mozak prima iz vaših očiju i onoga što osjeti vaše unutarnje uho. Može se dogoditi u mnogim situacijama, uključujući u zabavnom parku, na vožnja brodom ili krstarenjem, dok koristite VR uređaj itd.

VR može razboljeti ljude zbog senzornog sukoba, što rezultira simptomima bolesti kretanja kao što su dezorijentacija, mučnina, vrtoglavica, glavobolja, naprezanje očiju, sjedenje, povraćanje i drugi.

VR također može biti loš za vaše oči zbog naprezanja očiju, čiji simptomi uključuju bol ili svrbež u očima, dvoslike, glavobolje i bol u vratu. Neki ljudi mogu osjetiti jedan ili više takvih simptoma nekoliko sati nakon skidanja slušalica.

Kao pravilo, VR uređaj bi trebao osvježiti zaslon najmanje 90 puta u sekundi (FPS), a odgoda zaslona trebala bi biti ispod 20 milisekundi kako bi se izbjegla mučnina kod ljudi.

S navedenim kašnjenjem od samo 12 milisekundi, R1 smanjuje kašnjenje na neprimjetnu razinu. Dok R1 pomaže minimizirati učinke mučnine zbog kretanja, neki ispitanici Vision Pro prijavili su simptome mučnine nakon kretanja nakon nošenja slušalica dulje od 30 minuta.

Specijalizirani Apple Silicon koprocesori donose velike prednosti

Appleu nisu strani specijalizirani procesori. Tijekom godina, njegov silikonski tim proizveo je mobilne i stolne čipove na kojima bi industrija zavidjela.

Appleovi silikonski čipovi uvelike se oslanjaju na specijalizirane koprocesore za rukovanje određenim značajkama. Secure Enclave sigurno upravlja biometrijskim podacima i podacima o plaćanju, na primjer, dok Neural Engine ubrzava AI funkcije bez uništavanja baterije.

Oni su savršeni primjeri onoga što se može postići posjedovanjem visoko fokusiranog koprocesora za pravi skup zadataka u odnosu na koristeći glavni procesor za sve.