Apple nadgrajuje persone za prave klepete iz oči v oči na Vision Pro

Apple nadgrajuje persone za prave klepete iz oči v oči na Vision Pro

Apple je danes izdal 'Spatial Personas' v javni različici beta za Vision Pro. Na novo nadgrajen sistem avatarjev lahko zdaj pripelje ljudi neposredno v vašo sobo. Dobili smo zgodnji pogled.

Veliko je bilo povedanega o Applovem sistemu avatarjev Persona za Vision Pro. Ne glede na to, ali se vam zdijo nenavadni ali sprejemljivi, je nekaj gotovo: to je najbolj fotorealističen sistem avatarjev v realnem času, ki je vgrajen v katero koli slušalko, ki je danes na voljo. In zdaj se Personas nadgrajuje s 'Spatial Personas'.

Toda ali niso bile Persone že 'prostorske'? Naj razložim.

Sorta Spatial

Ob predstavitvi je sistem Persona uporabnikom omogočal skeniranje obrazov v slušalke, da bi ustvarili digitalno identiteto, ki je videti in se premika kot uporabnik, zahvaljujoč množici senzorjev v Vision Pro. Ko opravljate klic FaceTime z drugim uporabnikom (ali uporabniki) Vision Pro, bi bila glava, ramena in roke njihovih oseb prikazani v lebdečem polju.

Apple Upgrades Personas for True Face-to-face Chats on Vision Pro PlatoBlockchain Data Intelligence. Vertical Search. Ai.
Avtor slike Apple

Čeprav se je to včasih lahko zdelo, kot da bi se pogovarjali iz oči v oči, je dejstvo, da so bili v okvirju (ki ga lahko premikate ali spreminjate velikost kot katero koli drugo okno), dalo občutek, kot da dejansko niso bili stoji tik ob tebi. In to ne samo zaradi okvirja, ampak tudi zato, ker dejansko niste bili v istem prostoru kot oni – ni tako, da bi lahko stopili do vas, da bi dali pet, ker bi obtičali v okno na vašem zaslonu.

Iz oči v oči

Zdaj s programom Spatial Personas (ki je bil danes izdan v različici beta na najnovejši različici VisionOS) je avatar vsake osebe upodobljen v skupnem prostoru brez okvirja. Ko rečem 'skupni prostor', mislim, da če nekdo naredi korak proti meni v svoji sobi, dejansko vidim, da pride korak bližje meni.

Prej je bilo zaradi okvirja videti, kot da bi klepetali v 3D video klepetu. Zdaj s skupnim prostorom in brez okvirja se resnično počutite, kot da stojite drug poleg drugega. Gre za izkušnjo "družiti se na istem kavču" ali "zbrati se za isto mizo", ki pri Vision Pro ob predstavitvi dejansko ni bila mogoča.

In res je zelo prepričljivo. V klicu Vision Pro FaceTime s štirimi osebami (čeprav jih je skupno podprtih do pet) sem si lahko ogledal novi sistem, pri čemer so vsi uporabljali prostorske osebe. Še vedno boste videli samo njihovo glavo, ramena in roke, zdaj pa se resnično počutite kot klepet namesto 3D videoklepeta. Zdi se veliko bolj osebno.

Prostorske osebe so opt-in

Da bo jasno, različica Person za 'video klepet' (z okvirjem) še vedno obstaja. Pravzaprav je to privzeti način za prikaz avatarjev, ko se začne klic FaceTime. Za preklop na prostorsko osebo morate pritisniti gumb v meniju FaceTime.

In čeprav se to morda zdi čudna izbira, dejansko mislim, da je nekaj na tem.

Po eni strani je privzeta izkušnja »FaceTime v Vision Pro« videti kot video klepet. V vsakdanjem poslu smo že skoraj vsi navajeni videti nekoga drugega na drugi strani spletne kamere. In čeprav je to bolj oseben kot samo zvočni klic, je še vedno korak stran od dejanskega srečanja z nekom osebno.

Spatial Personas je bolj kot, da se dejansko osebno srečate, saj lahko dejansko začutite medosebni prostor med vami in drugimi ljudmi v tem skupnem prostoru. Če hodijo gor in dobijo malo preblizu, boste resnično enako občutili, če vam nekdo v resničnem življenju stoji preblizu.

Zato je lepo imeti obe možnosti. Z nekom lahko 'video klepetam' v običajnem načinu ali pa ga lahko v bistvu povabim v svoj prostor, če situacija zahteva bolj osebno srečanje.

In Spatial Personas niso samo za klepetanje. Tako kot običajne Persone lahko tudi vi uporabljate SharePlay, medtem ko uporabljate FaceTime, da skupaj gledate filme in igrate igre (pod pogojem, da imata oba nameščeno podprto aplikacijo).

Bodite Prosta oblika na primer Applova sodelovalna aplikacija za digitalno tablo. Če zaženete Prosta oblika med klicem FaceTime s Spatial Personas bodo vsi drugi pozvani, da se pridružijo aplikaciji, ki bo nato vse naložila pred tablo.

Vse je tudi sinhronizirano. Kdorkoli drug v klicu lahko vidi, kaj ste dali na tablo, in spremlja v realnem času, ko dodajate nove fotografije ali rišete opombe. Prav tako enostavno lahko vsakdo fizično stopi do table in sam komunicira z njo.

Ko gre za skupno gledanje filmov na Apple TV na Vision Pro, Spatial Personas sprostijo občutek skupnega sedenja na istem kavču, kar s slušalkami ob lansiranju ni bilo povsem mogoče. Zdaj, ko gledate film s prijatelji, boste z njimi sedeli z ramo ob rami, kar je zelo drugačen občutek, kot če bi okno z njihovimi obrazi lebdelo blizu videa, ki ga gledate.

Med uporabo prostorskih oseb je mogoče pretakati veliko ravnih aplikacij vsem v klicu FaceTime, vendar bodo morali razvijalci za 3D ali interaktivno vsebino to funkcijo posebej implementirati.

To je sicer nekoliko problematično, ker je težko natančno vedeti, katere aplikacije podpirajo Spatial Personas ali celo SharePlay. Od zdaj se morate pomakniti vse do dna strani aplikacije, da vidite, ali podpira SharePlay (razen če razvijalec tega ne omeni v opisu aplikacije). In tudi takrat to ne pomeni nujno, da podpira prostorske osebe.

Majhne podrobnosti

Apple je razmislil tudi o nekaterih manjših podrobnostih za Spatial Personas, med katerimi je morda najbolj zanimiva 'lokomocija'.

Premikanje po prostoru je v bistvu privzeto. Če se želite približati osebi ali aplikaciji ... preprosto stopite do nje. Toda kaj se zgodi, če je zunaj meja vašega fizičnega prostora? No, namesto neposrednega premika sami praktično lahko celoten skupni prostor premaknete bližje ali dlje od sebe.

To lahko storite kadar koli, v kateri koli aplikaciji, in vsi ostali bodo videli vaš novi položaj, ki se odraža znotraj njihove prostora, pri čemer je vse sinhronizirano.

Apple je naredil tudi tako, da ko se dve prostorski osebi preveč približata, bosta začasno spet videti kot lebdeča fotografija kontakta. Mislim, da je to verjetno zato, ker se želijo izogniti morebitnemu nadlegovanju ali trolanju (tj.: nekoga želite razjeziti, zato svojo virtualno roko usmerite naravnost skozi njegov virtualni obraz, kar je neprijetno tako vizualno kot z vidika medosebnega prostora).

Odličen prostorski zvok slušalk je seveda privzeto vključen, tako da vsi zvenijo, kot da prihajajo, od koder koli stojijo v sobi, njihovi glasovi pa dejansko zvenijo, kot da so v tvoja soba (na podlagi ocene slušalk, kako naj bi zvenela akustika). in če se premaknete v popolnoma poglobljen prostor, kot je »okolje«, prostorski zvok preide v to novo akustično okolje – tako lahko na primer zaradi vseh kamnitih površin v bližini slišite tihi odmev ljudi v okolju Joshua Tree. Slišati, da akustika zbledi iz vaše sobe v 'zunaj' okolja, je subtilna magija.

Apple Upgrades Personas for True Face-to-face Chats on Vision Pro PlatoBlockchain Data Intelligence. Vertical Search. Ai.
Avtor slike Apple

In ne nazadnje, mogoče je imeti mešano skupino udeležencev FaceTime. Na primer, lahko imate ljudi, ki uporabljajo iPhone, tablico Android (da, lahko FaceTime z ljudmi na napravah, ki niso Applove), običajna oseba in prostorska oseba hkrati. SharePlay bo v tem primeru deloval tudi med tema formatoma (razen v napravah, ki niso Apple), če ga aplikacija podpira. V primerih z aplikacijami, ki so izvorne za Vision Pro, bi uporabnik iPhonea prejel obvestilo, da njegova naprava ni podprta.

- - - - -

Spatial Personas je velika nadgradnja Applovega sistema avatarjev, vendar podjetje trdi, da je celoten sistem Persona še vedno v "beta različici". Verjetno to pomeni, da je še več izboljšav.

Časovni žig:

Več od Cesta do VR