Apple opgraderer personas til ægte ansigt-til-ansigt chats på Vision Pro

Apple opgraderer personas til ægte ansigt-til-ansigt chats på Vision Pro

Apple har i dag frigivet 'Spatial Personas' i offentlig beta på Vision Pro. Det nyopgraderede avatarsystem kan nu bringe folk direkte ind i dit værelse. Vi fik et tidligt kig.

Der er blevet sagt meget om Apples Persona-avatar-system til Vision Pro. Uanset om du finder dem uhyggelige eller acceptabelt, er én ting sikkert: Det er det mest fotorealistiske realtidsavatarsystem, der er indbygget i ethvert headset, der er tilgængeligt i dag. Og nu bliver Personas opgraderet med 'Spatial Personas'.

Men var Personas ikke allerede 'rumlige'? Lad mig forklare.

Sorta Spatial

Ved lanceringen tillod Persona-systemet brugere at scanne deres ansigter ind i headsettet for at skabe en digital identitet, der ser ud og bevæger sig som brugeren takket være mængden af ​​sensorer i Vision Pro. Når du laver et FaceTime-opkald med en anden Vision Pro-bruger (eller brugere), vil deres persona(er) hoved, skuldre og hænder blive vist inde i en flydende boks.

Apple Upgrades Personas for True Face-to-face Chats on Vision Pro PlatoBlockchain Data Intelligence. Vertical Search. Ai.
Billede udlånt af Apple

Selvom det til tider kunne føles som at tale ansigt til ansigt, gjorde det faktum, at de var indeholdt i en ramme (som du kan flytte eller ændre størrelsen på som ethvert andet vindue), som om de faktisk ikke var står lige ved siden af ​​dig. Og det er ikke kun på grund af rammen, men også fordi du faktisk ikke delte det samme rum som dem – det er ikke som om de kunne gå lige op til dig for en high-five, fordi de ville sidde fast i vindue på din skærm.

Ansigt til ansigt

Nu med Spatial Personas (udgivet i beta i dag på den seneste version af VisionOS), gengives hver persons avatar i et delt rum uden rammen. Når jeg siger 'shared space', mener jeg, at hvis nogen tager et skridt mod mig på deres værelse, så ser jeg dem komme et skridt tættere på mig.

Tidligere fik rammen det til at føles som om, du lavede en 3D-videochat. Nu med det fælles rum og ingen ramme, føles det virkelig som om, I står lige ved siden af ​​hinanden. Det er 'hænge ud på den samme sofa' eller 'samles om det samme bord'-oplevelsen, der faktisk ikke var mulig på Vision Pro ved lanceringen.

Og det er virkelig ret overbevisende. Jeg fik et smugkig på det nye system i et Vision Pro FaceTime-opkald med fire personer (selvom op til fem understøttes i alt), alle ved hjælp af Spatial Personas. Du vil stadig kun se deres hoved, skuldre og hænder, men nu føles det virkelig som en klem i stedet for en 3D-videochat. Det føles meget mere personligt.

Spatial Personas er opt-in

For at være klar, eksisterer 'videochat'-versionen af ​​Personas (med rammen) stadig. Faktisk er det standardmåden, at avatarer vises, når et FaceTime-opkald startes. Skift til en Spatial Persona kræver at trykke på en knap i FaceTime-menuen.

Og selvom dette kan virke som et mærkeligt valg, så tror jeg faktisk, der er noget om det.

På den ene side føles standard 'FaceTime in Vision Pro'-oplevelsen som en videochat. I hverdagen er vi alle ret vant til at se en anden på den anden side af et webcam efterhånden. Og selvom dette er mere personligt end et kun lydopkald, er det stadig et skridt væk fra faktisk at mødes med nogen personligt.

Spatial Personas er mere som om du faktisk mødes personligt, da du faktisk kan mærke det interpersonelle rum mellem dig og de andre mennesker i dette delte rum. Hvis de går op og får lidt for tæt på, vil du virkelig mærke det på samme måde, hvis nogen står for tæt på dig i det virkelige liv.

Så det er rart at have begge disse muligheder. Jeg kan 'videochatte' med nogen med den almindelige tilstand, eller jeg kan i det væsentlige invitere dem ind i mit rum, hvis situationen kræver et mere personligt møde.

Og Spatial Personas er ikke kun til at chatte. Ligesom almindelige Personas kan du bruge SharePlay, mens du er på FaceTime til at se film og spille spil sammen (forudsat at I begge har en understøttet app installeret).

Tag Freeform for eksempel Apples samarbejdsbaserede digitale tavle-app. Hvis du starter Freeform mens du er på et FaceTime-opkald med Spatial Personas, vil alle andre blive bedt om at deltage i appen, som derefter vil indlæse alle foran tavlen.

Alt er også synkroniseret. Alle andre i opkaldet kan se, hvad du har sat på tavlen og se i realtid, mens du tilføjer nye billeder eller tegner anmærkninger. Og lige så nemt kan enhver fysisk gå hen til tavlen og selv interagere med den.

Når det kommer til delt filmvisning på Apple TV på Vision Pro, låser Spatial Personas op for følelsen af ​​at sidde i den samme sofa sammen, hvilket ikke helt var muligt med headsettet ved lanceringen. Når du nu ser en film med dine venner, vil du sidde skulder ved skulder med dem, hvilket føles meget anderledes end at have et vindue med deres ansigt i svævende nær den video, du ser.

Det er muligt at streame mange flade apps til enhver i FaceTime-opkaldet, mens du bruger Spatial Personas, men for 3D eller interaktivt indhold skal udviklere specielt implementere funktionen.

Det er dog noget problematisk, fordi det er svært at vide præcis, hvilke apps der understøtter Spatial Personas eller endda SharePlay for den sags skyld. Fra nu af skal du scrolle helt ned til bunden af ​​en apps side for at se, om den understøtter SharePlay (medmindre udvikleren nævner det i appens beskrivelse). Og selv da betyder dette ikke nødvendigvis, at den understøtter Spatial Personas.

De små detaljer

Apple gennemtænkte også nogle mindre detaljer til Spatial Personas, hvoraf den måske mest interessante er 'bevægelse'.

Bevægelse i rumskala er i det væsentlige standarden. Hvis du vil tættere på en person eller app... går du bare fysisk hen til den. Men hvad sker der, hvis det er uden for grænserne af dit fysiske rum? Nå, i stedet for direkte at flytte dig selv virtuelt kan du faktisk flytte hele det fælles rum tættere på eller længere fra dig.

Du kan gøre dette når som helst, i enhver app, og alle andre vil se din nye position afspejlet indeni deres plads, og holder alt synkroniseret.

Apple har også lavet, så når to Spatial Personas kommer for tæt på hinanden, vil de midlertidigt vende tilbage til bare at ligne et flydende kontaktbillede. Jeg tror, ​​det sandsynligvis er fordi, de ønsker at undgå mulig chikane eller trolling (dvs.: du vil irritere nogen, så du fase din virtuelle hånd lige gennem deres virtuelle ansigt, hvilket er ubehageligt både visuelt og fra et interpersonelt rumsynspunkt).

Headsettets fremragende rumlige lyd er selvfølgelig inkluderet som standard, så alle lyder som om de kommer fra, uanset hvor de står i rummet, og deres stemmer lyder faktisk som om de er i dit værelse (baseret på headsettets vurdering af, hvordan akustikken skal lyde). og hvis du flytter til et helt fordybende rum som et 'miljø', går den rumlige lyd over til det nye akustiske miljø - så du for eksempel kan høre folk svagt ekko i Joshua Tree-miljøet på grund af alle klippeoverflader i nærheden. At høre akustikken falme fra at være inde i dit eget værelse til at være 'udenfor' i et miljø er en subtil smule magi.

Apple Upgrades Personas for True Face-to-face Chats on Vision Pro PlatoBlockchain Data Intelligence. Vertical Search. Ai.
Billede udlånt af Apple

Og sidst, men ikke mindst, er det muligt at have en blandet gruppe af FaceTime-deltagere. For eksempel kan du have folk, der bruger en iPhone, en Android-tablet (ja det kan du FaceTime med folk på ikke-Apple-enheder), en normal Persona og en Spatial Persona på én gang. SharePlay vil i så fald også fungere mellem disse formater (undtagen ikke-Apple-enheder), så længe appen understøtter det. I tilfælde med apps, der er oprindelige fra Vision Pro, vil iPhone-brugeren få en meddelelse om, at deres enhed ikke understøttes.

– – – – –

Spatial Personas er en stor opgradering til Apples avatar-system, men virksomheden fastholder, at hele Persona-systemet stadig er i 'beta'. Det betyder formentlig, at der er flere forbedringer på vej.

Tidsstempel:

Mere fra Vejen til VR