Apple oppgraderer personas for sanne ansikt-til-ansikt-chatter på Vision Pro

Apple ga i dag ut 'Spatial Personas' i offentlig beta på Vision Pro. Det nylig oppgraderte avatarsystemet kan nå bringe folk rett inn i rommet ditt. Vi fikk en tidlig titt.

Mye har blitt sagt om Apples Persona-avatarsystem for Vision Pro. Enten du finner dem uhyggelige eller farbare, er én ting sikkert: det er det mest fotorealistiske sanntidsavatarsystemet som er innebygd i et hvilket som helst headset som er tilgjengelig i dag. Og nå blir Personas oppgradert med 'Spatial Personas'.

Men var ikke Personas allerede 'romlige'? La meg forklare.

Sorta Spatial

Ved lanseringen tillot Persona-systemet brukere å skanne ansiktene sine inn i headsettet for å skape en digital identitet som ser ut og beveger seg som brukeren takket være mengden av sensorer i Vision Pro. Når du foretar et FaceTime-anrop med en annen Vision Pro-bruker (eller brukere), vil deres persona(er) hode, skuldre og hender bli vist inne i en flytende boks.

Selv om dette til tider kunne føles som å snakke ansikt til ansikt, gjorde det faktum at de var inneholdt i en ramme (som du kan flytte eller endre størrelse på som et hvilket som helst annet vindu) at det føltes som om de faktisk ikke var står rett ved siden av deg. Og det er ikke bare på grunn av rammen, men også fordi du faktisk ikke delte samme plass som dem – det er ikke slik at de kunne gå rett opp til deg for en high-five, fordi de ville bli sittende fast i vindu på skjermen.

Ansikt til ansikt

Nå med Spatial Personas (utgitt i beta i dag på den nyeste versjonen av VisionOS), gjengis hver persons avatar i et delt rom uten rammen. Når jeg sier "delt rom", mener jeg at hvis noen tar et skritt mot meg på rommet sitt, ser jeg dem komme et skritt nærmere meg.

Tidligere fikk rammen det til å føles som om du gjorde en 3D-videochat. Nå med den delte plassen og ingen ramme, føles det virkelig som om dere står rett ved siden av hverandre. Det er "henge ut på samme sofa" eller "samle rundt samme bord"-opplevelsen som faktisk ikke var mulig på Vision Pro ved lanseringen.

Og det er egentlig ganske overbevisende. Jeg fikk en sniktitt på det nye systemet i en Vision Pro FaceTime-samtale med fire personer (selv om opptil fem støttes totalt), alle bruker Spatial Personas. Du vil fortsatt bare se hodet, skuldrene og hendene deres, men nå føles det virkelig som en klynge i stedet for en 3D-videochat. Det føles mye mer personlig.

Romlige personas er opt-in

For å være tydelig, "videochat"-versjonen av Personas (med rammen) eksisterer fortsatt. Faktisk er det standardmåten som avatarer vises når et FaceTime-anrop startes. Bytte til en Spatial Persona krever å trykke på en knapp på FaceTime-menyen.

Og selv om dette kan virke som et merkelig valg, tror jeg faktisk det er noe med det.

På den ene siden føles standard 'FaceTime in Vision Pro'-opplevelsen som en videochat. I hverdagen er vi alle ganske vant til å se noen andre på den andre siden av et webkamera nå. Og selv om dette er mer personlig enn en samtale med kun lyd, er det fortsatt et skritt unna å faktisk møte noen personlig.

Spatial Personas er mer som om du faktisk møter opp personlig, siden du faktisk kan føle det mellommenneskelige rommet mellom deg og de andre menneskene i dette delte rommet. Hvis de går opp og får litt for nærme, vil du virkelig føle det på samme måte hvis noen står for nær deg i det virkelige liv.

Så det er fint å ha begge disse alternativene. Jeg kan "videochatte" med noen med vanlig modus, eller jeg kan egentlig invitere dem inn i rommet mitt hvis situasjonen krever et mer personlig møte.

Og Spatial Personas er ikke bare for chatting. Akkurat som vanlige Personas, kan du bruke SharePlay mens du er på FaceTime for å se filmer og spille spill sammen (forutsatt at dere begge har en støttet app installert).

Ta Freeform for eksempel Apples samarbeidende digitale tavle-app. Hvis du starter Freeform mens du er på en FaceTime-samtale med Spatial Personas, vil alle andre bli bedt om å bli med i appen, som deretter laster alle foran tavlen.

Alt er også synkronisert. Alle andre i samtalen kan se hva du har satt på tavlen og se i sanntid mens du legger til nye bilder eller tegner kommentarer. Og like enkelt kan hvem som helst fysisk gå opp til brettet og samhandle med det selv.

Når det kommer til delt filmvisning på Apple TV på Vision Pro, låser Spatial Personas opp følelsen av å sitte på samme sofa sammen, noe som ikke helt var mulig med headsettet ved lansering. Nå når du ser en film med vennene dine, vil du sitte skulder ved skulder med dem, noe som føles veldig annerledes enn å ha et vindu med ansiktet deres i flytende nær videoen du ser på.

Det er mulig å streame mange flate apper til hvem som helst i FaceTime-anropet mens du bruker Spatial Personas, men for 3D eller interaktivt innhold må utviklere implementere funksjonen spesielt.

Det er imidlertid noe problematisk fordi det er vanskelig å vite nøyaktig hvilke apper som støtter Spatial Personas eller SharePlay for den saks skyld. Per nå må du bla helt til bunnen av en app-side for å se om den støtter SharePlay (med mindre utvikleren nevner det i appens beskrivelse). Og selv da betyr ikke dette nødvendigvis at den støtter Spatial Personas.

De små detaljene

Apple tenkte også gjennom noen mindre detaljer for Spatial Personas, den mest interessante av disse er "bevegelse".

Bevegelse i romskala er i hovedsak standard. Hvis du vil flytte nærmere en person eller app... går du bare fysisk bort til den. Men hva skjer hvis det er utenfor grensene til ditt fysiske rom? Vel, i stedet for å flytte direkte deg selv praktisk talt kan du faktisk flytte hele den delte plassen nærmere eller lenger fra deg.

Du kan gjøre dette når som helst, i hvilken som helst app, og alle andre vil se den nye posisjonen din reflektert innenfor deres plass, og holder alt synkronisert.

Apple har også laget slik at når to Spatial Personas kommer for nær hverandre, vil de midlertidig gå tilbake til å bare se ut som et flytende kontaktbilde. Jeg tror dette sannsynligvis er fordi de ønsker å unngå mulig trakassering eller trolling (dvs.: du vil irritere noen slik at du faser din virtuelle hånd rett gjennom det virtuelle ansiktet deres, noe som er ubehagelig både visuelt og fra et mellommenneskelig romstandpunkt).

Headsettets utmerkede romlige lyd er selvfølgelig inkludert som standard, så alle høres ut som om de kommer fra uansett hvor de står i rommet, og stemmene deres høres faktisk ut som om de er i rommet ditt (basert på headsettets estimat for hvordan akustikken skal høres ut). Og hvis du flytter til et fullstendig oppslukende rom som et "miljø", går den romlige lyden over til det nye akustiske miljøet – slik at du for eksempel kan høre folk svakt ekko i Joshua Tree-miljøet på grunn av alle steinflatene i nærheten. Å høre akustikken blekne fra å være inne i ditt eget rom til å være "utenfor" i et miljø er en subtil bit av magi.

Og sist, men ikke minst, er det mulig å ha en blandet gruppe med FaceTime-deltakere. Du kan for eksempel ha folk som bruker en iPhone, et Android-nettbrett (ja du kan FaceTime med folk på ikke-Apple-enheter), en normal Persona og en Spatial Persona på en gang. SharePlay vil i så fall også fungere mellom disse formatene (unntatt ikke-Apple-enheter) så lenge appen støtter det. I tilfeller med apper som er opprinnelig fra Vision Pro, vil iPhone-brukeren få et varsel om at enheten deres ikke støttes.

- - - - -

Spatial Personas er en stor oppgradering til Apples avatarsystem, men selskapet fastholder at hele Persona-systemet fortsatt er i "beta". Antagelig betyr det at det er flere forbedringer som kommer.

• SEO-drevet innhold og PR-distribusjon. Bli forsterket i dag.
• PlatoData.Network Vertical Generative Ai. Styrk deg selv. Tilgang her.
• PlatoAiStream. Web3 Intelligence. Kunnskap forsterket. Tilgang her.
• PlatoESG. Karbon, CleanTech, Energi, Miljø, Solenergi, Avfallshåndtering. Tilgang her.
• PlatoHelse. Bioteknologisk og klinisk etterretning. Tilgang her.
• kilde: https://www.roadtovr.com/apple-vision-pro-spatial-personas-hands-on/