„Apple Vision Pro“ pirmiausia gali būti suaktyvintas srautinis perdavimas, o kompiuterių žaidėjai atsilieka – automatizuotas pagrindinis puslapis

„Apple“ oficialiai palenkė savo ranką: „Vision Pro“ pristatomas srautinis srautas. Technologija, artima vaizdinio atvaizdavimo pusbroliui, žada, kad didelės raiškos virtualiosios realybės patirtis taps efektyvesnė, pirmenybę teikiant scenos daliai, kurią vartotojas iš tikrųjų žiūri.

„Apple“ tai nėra tik našumo patobulinimas; tai strateginis pranašumas. Kompiuterių žaidėjai, seniai įpratę dirbti su aparatūra, kad pasiektų sklandesnę VR patirtį, naujos kartos belaidžiame VR gali atsilikti nuo elegantiškos Vision Pro ekosistemos.

Skaitykite toliau, kad sužinotumėte, kaip veikia suaktyvintas srautinis perdavimas, kodėl tai svarbu ir ką tai gali reikšti VR žaidimų ateičiai.

Kas yra suaktyvintas srautinis perdavimas?

Foveated srautinis perdavimas veikia dinamiškai koreguodamas srautiniu būdu perduodamo turinio kokybę pagal tai, kur nukreiptos akys.

Žmogaus akis aiškiausiai mato duobėje, mažame centriniame tinklainės regione. Foveated srautinis perdavimas išnaudoja šį principą: ausinės gauna didelės raiškos duomenis tik naudotojo fokusavimo srityje, o periferinis turinys pristatomas prastesnės kokybės.

Pagrindinis skirtumas tarp suaktyvinto srautinio perdavimo ir suaktyvinto atvaizdavimo yra tame, kur vyksta darbo krūvis. Foveated atvaizdavimas apskaičiuojamas lokaliai: įrenginys arba vaizdo plokštė atvaizduoja scenos sritis skirtingais detalumo lygiais. Tačiau suaktyvintas srautinis perdavimas veikia tinkle.

Vietinis arba debesies kompiuteris perduoda VR turinį į ausines ir siunčia visą informaciją tik ten, kur vartotojas ieško. Tai labai svarbu belaidžiams įrenginiams, kuriuose pralaidumas ir delsa yra ribojantys veiksniai.

„Valve“ „Steam Frame“, kuri susidūrė su vėlavimais, susijusiais su pasauliniu atminties trūkumu, yra pirmosios masinės rinkos ausinės iš stambaus asmeninio kompiuterio VR pardavėjo, pavertusios srautinį srautą antraštėje, nors panašios technikos atsirado kituose įrenginiuose ir tyrimų prototipuose.

Naudojant USB belaidį adapterį, teoriškai jis galėtų užtikrinti aukštos kokybės, mažai delsos VR patirtį be modemo. Šiuo metu „Apple“, atrodo, yra pasirengusi pirmą kartą pristatyti jį į pagrindinį vartotojų įrenginį.

Mažai žinomas faktas: „Valve“ „Steam Frame“ prototipas naudoja specialų 6 GHz belaidį adapterį, kad būtų pasiektas mažos delsos srautinis perdavimas, o tai nėra matoma dabartinėse komercinėse ausinėse.

„Apple“ požiūris į visionOS 26.4

„Apple“ kūrėjo dokumentacija patvirtina, kad „visionOS 26.4“, šiuo metu beta versijoje, pristato „Foveated Streaming“ sistemą. Pasak Apple:

„Foveated Streaming“ sistema suteikia seansu pagrįstą API, skirtą „Apple Vision Pro“ ryšiams užmegzti su vietiniais ir debesies srautinio perdavimo galutiniais taškais.

„Galutinio taško priegloba perduoda aukštos kokybės turinį tik tada, kai reikia, remdamasi informacija apie apytikslį regioną, kuriame asmuo ieško, užtikrindamas našumą.

Sistema yra agnostinė, o tai reiškia, kad kūrėjai gali srautiniu būdu perduoti turinį iš vietinio kompiuterio, galingo „Mac“ arba debesyje pagrįstų galinių taškų, tokių kaip NVIDIA „CloudXR“. Skirtingai nuo „macOS Spatial Rendering“, kuris buvo taikomas tik vietiniams „Mac“ kompiuteriams, ši sistema yra lanksti, žemo lygio ir skirta integruoti su įvairia aparatine įranga.

Vienas išskirtinis „Apple“ naudojimo atvejis yra pateikiamo ir srautinio turinio maišymas. Pavyzdžiui, skrydžio treniruoklis gali atvaizduoti kabiną vietoje „Vision Pro“, transliuodamas platų reljefą ir peizažus iš nuotolinio kompiuterio ar debesies serverio.

Šis hibridinis metodas sumažina ausinių procesoriaus apkrovą ir užtikrina sklandesnį vizualiai sudėtingų VR programų veikimą.

Poveikis kompiuterių žaidėjams

PC VR entuziastams „Vision Pro“ ankstyvas suaktyvinto srautinio perdavimo pritaikymas gali būti pažadinimo skambutis. Tradiciniam PC VR reikalingos aukščiausios klasės vaizdo plokštės, kruopštus kabelių valdymas ir dažnai kompromisai dėl belaidžio patogumo.

Net naudojant patobulintą atvaizdavimo programinę įrangą, pvz., ALVR, norint pasiekti sklandų belaidį VR esant didelei raiškai, reikia kruopštaus sąrankos ir nuolatinių patobulinimų.

„Apple“ sprendimas integruoja technologiją OS lygiu. Kūrėjai gauna prieigą prie API, kurios suteikia „neapdorotą“ vartotojo žvilgsnio sritį, leidžiančią nuotoliniams priegloboms dinamiškai nustatyti prioritetą, kurioms scenos dalims transliuoti visa kokybe.

„VisionOS“ tai įgyvendina, tuo pat metu saugodama privatumą: užuot dalinęs tikslias akių sekimo koordinates, kūrėjai gauna apibendrintą fokusavimo sritį. Rezultatas yra tai, kad žaidimai ir programos yra efektyvesni ir įtraukiantys, nereikalaujant, kad kompiuterių žaidėjai žongliruotų aparatinės įrangos apribojimais.

„Vision Pro“ gali pasiūlyti geresnį belaidžio VR našumą, o įprastos kompiuterio sąrankos verčia susitvarkyti.

Kaip „Apple“ ekosistema padeda

„Apple“ ekosistema sustiprina suaktyvinto srautinio perdavimo pranašumus. Integruodami „RealityKit“ ir kitus erdvinio atvaizdavimo įrankius, kūrėjai gali sluoksniuoti didelio tikslumo, mažos delsos VR turinį su vietiniais vartotojo sąsajos elementais.

Lenktynių žaidimo pavyzdys tai puikiai iliustruoja: matuokliai ir kabinos prietaisai pateikiami vietoje, o kelias, peizažas ir dirbtinio intelekto valdomi elementai perduodami įvairaus tikslumo lygiu. Šis dvigubas požiūris sumažina delsą ir atveria naujas kūrybines galimybes.

Skrydžio treniruoklis galėtų pateikti labai detalią išorinę aplinką, perduodamą iš debesies, išlaikant tobulai perteiktą vidinę kabiną. Dizaineriams nebereikia rinktis tarp skiriamosios gebos, kadrų dažnio ir įrenginio šiluminių ribų.

Debesis pagrįstas srautinis perdavimas taip pat sumažina priklausomybę nuo aukščiausios klasės vietinio kompiuterio. Vidutiniškai įrengtas „Mac“ arba kompiuteris gali būti pagrindinis kompiuteris, o sunkus kėlimas vyksta debesyje. Kompiuterių žaidėjams, įpratusiems subalansuoti procesoriaus, GPU ir tinklo apkrovą, šis patogumas gali būti revoliucinis ir šiek tiek varginantis tiems, kurie investuoja į aukščiausios klasės aparatinę įrangą.

Kitos ausinės prisijungia prie lenktynių

„Apple“ nėra vienintelė bendrovė, tyrinėjanti suaktyvintą srautinį perdavimą. „Samsung Galaxy XR“ dabar ją palaiko per Guy Godin virtualų darbalaukį – 25 USD kainuojančią programėlę, leidžiančią akimis stebimoms ausinėms teikti pirmenybę srautiniam turiniui, atsižvelgiant į vartotojo dėmesį. „Meta Quest Pro“ ir „Play For Dream MR“ taip pat turi patobulintas transliacijos per „Virtual Desktop“ parinktis.

Tačiau Apple pranašumas yra OS lygio integracija ir kūrėjų palaikymas. Nors virtualiam darbalaukiui reikia trečiųjų šalių programų ir rankinio sąrankos, visionOS 26.4 siūlo savąją sistemą su seansų valdymu, dvikrypčiu pranešimų siuntimu ir suderinamumu su pramonės standartinėmis XR API.

Kūrėjai gali sukurti įtraukiančių erdvių, kuriose maišomas srautinis ir vietinis turinys, srautiniu būdu perduodamos aukštos kokybės debesų programos ir palaikoma nuosekli NS visose programose be papildomų paslaugų.

Mažai žinomas faktas: Atsižvelgiant į techninius srautinio perdavimo diegimo sutrikimus, tokie metodai gali duoti daugiau nei dešimt kartų efektyvesnį pralaidumo optimizavimą, palyginti su įprastu VR srautiniu perdavimu, jei jas visiškai išnaudoja klientas ir serveris.

Techninis pranašumas

Suaktyvintas srautinis perdavimas sumažina ausinių ekrano aparatinės įrangos ir tinklo poreikį. Ausinių vaizdo dekoderiai turi didžiausią pralaidumą ir skiriamąją gebą; Suteikus pirmenybę vartotojo fokusavimo sričiai, šios ribos yra naudojamos efektyviai.

„Apple“ „visionOS“ pavyzdinės programos parodo, kaip srautinis perdavimas ir vietinis atvaizdavimas gali egzistuoti kartu. Kūrėjai gali valdyti, kuris turinys yra vietinis, o kuris perduodamas srautiniu būdu, taip veiksmingai suteikdami įrankių rinkinį hibridinėms VR patirčiai.

Kartu su NVIDIA CloudXR palaikymu, reiklūs PC VR kūriniai gali būti pateikiami „Vision Pro“ prarandant našumą minimaliai.

Laukia iššūkiai

Nepaisant pažado, yra iššūkių. Kūrėjai turi pritaikyti žaidimus ir programas, kad panaudotų naujas API.

Įrankiai, tokie kaip ALVR, galiausiai gali palaikyti „Vision Pro“ srautinį srautą, tačiau įgyvendinimas yra sudėtingas. Suaktyvintas srautinis perdavimas taip pat priklauso nuo tikslaus akių stebėjimo ir mažos delsos tinklų, o tai gali būti sudėtinga atliekant namų nustatymus, palyginti su kontroliuojamomis demonstracinėmis versijomis.

Iš pradžių bus galima naudoti tik aukščiausios klasės įrenginius. Vien dėl „Vision Pro“ kainos jis bus nepasiekiamas paprastiems vartotojams, o kompiuteriniai žaidėjai su specialiais VR įrenginiais iš pradžių gali laikytis pažįstamų sąrankų. Vis dėlto, „Apple“, nustatydama standartą, galėtų paspartinti akių stebėjimo ir suaktyvinto srautinio perdavimo pritaikymą platesnėje VR ekosistemoje.

TL; DR

• Suaktyvintas srautinis perdavimas visionOS 26.4 yra didelis belaidžio VR pažanga. Tai leidžia srautiniu būdu perduoti didelės raiškos turinį tik ten, kur vartotojas žiūri, o vietinis atvaizdavimas tvarko kitus vartotojo sąsajos elementus.
• Šis metodas sumažina delsą, pagerina našumą ir atveria kūrybines galimybes įtraukiamiems potyriams. „Apple Vision Pro“ integruoja tai OS lygiu, įgalindama hibridinį srautinį perdavimą iš vietinių kompiuterių arba debesies galinių taškų su NVIDIA CloudXR palaikymu.
• Kompiuterių žaidėjai gali atsilikti nuo belaidžio VR veikimo, nes „Apple“ siūlo efektyvią, paruoštą naudoti sistemą, kuri sumažina aukščiausios klasės vietinės aparatinės įrangos poreikį.
• Kūrėjai gauna prieigą prie galingų API, skirtų srautiniam ir vietoje pateikiamam turiniui sluoksniuoti ir sukurti sklandesnę ir vizualiai turtingesnę patirtį.

Šis straipsnis buvo sukurtas naudojant dirbtinio intelekto pagalbą ir žmogaus redagavimą.

Jei jums patiko tai, jums taip pat gali patikti: