Apple upgradet persona's voor echte face-to-face chats op Vision Pro

Apple upgradet persona's voor echte face-to-face chats op Vision Pro

Tijdstempel: 2 april 2024 8:59 uur

Apple heeft vandaag 'Spatial Personas' uitgebracht als openbare bètaversie van Vision Pro. Het onlangs geüpgradede avatarsysteem kan nu mensen rechtstreeks naar uw kamer brengen. We hebben al vroeg gekeken.

Er is veel gezegd over Apple's Persona-avatarsysteem voor Vision Pro. Of je ze nu griezelig of redelijk vindt, één ding is zeker: het is het meest fotorealistische realtime avatarsysteem dat in elke headset is ingebouwd die momenteel verkrijgbaar is. En nu wordt Personas geüpgraded met 'Spatial Personas'.

Maar waren Persona's niet al 'ruimtelijk'? Laat het me uitleggen.

Soort ruimtelijk

Bij de lancering konden gebruikers met het Persona-systeem hun gezichten in de headset scannen om een ​​digitale identiteit te creëren die eruitziet en beweegt als de gebruiker dankzij de hele reeks sensoren in Vision Pro. Wanneer u een FaceTime-gesprek voert met een andere Vision Pro-gebruiker (of gebruikers), worden het hoofd, de schouders en de handen van hun Persona(s) in een zwevend vak weergegeven.

Apple upgradet persona's voor echte face-to-face chats op Vision Pro PlatoBlockchain Data Intelligence. Verticaal zoeken. Ai.
Met dank aan Apple

Hoewel dit soms kon aanvoelen als face-to-face praten, gaf het feit dat ze zich in een frame bevonden (dat je net als elk ander venster kunt verplaatsen of vergroten/verkleinen) het gevoel dat ze dat niet waren. staat vlak naast je. En dat komt niet alleen door het frame, maar ook omdat je niet daadwerkelijk in dezelfde ruimte zat als zij. Het is niet zo dat ze naar je toe zouden kunnen lopen voor een high-five, omdat ze dan vast zouden zitten in de ruimte. venster op uw scherm.

Oog in oog

Met Spatial Personas (vandaag uitgebracht als bètaversie van de nieuwste versie van VisionOS) wordt de avatar van elke persoon weergegeven in een gedeelde ruimte zonder frame. Als ik 'gedeelde ruimte' zeg, bedoel ik dat als iemand in zijn kamer een stap naar mij toe doet, ik hem ook daadwerkelijk een stap dichter naar mij toe zie komen.

Voorheen gaf het frame het gevoel alsof je een 3D-videochat aan het doen was. Nu met de gedeelde ruimte en zonder frame, voelt het echt alsof je naast elkaar staat. Het is de ‘rondhangen op dezelfde bank’ of ‘samen rond dezelfde tafel’-ervaring die bij de lancering eigenlijk niet mogelijk was op Vision Pro.

En het is echt heel overtuigend. Ik kreeg een voorproefje van het nieuwe systeem tijdens een Vision Pro FaceTime-gesprek met vier mensen (hoewel er in totaal maximaal vijf worden ondersteund), allemaal met behulp van Spatial Persona's. Je ziet nog steeds alleen hun hoofd, schouders en handen, maar nu voelt het echt als een gesprek in plaats van een 3D-videochat. Het voelt veel persoonlijker.

Ruimtelijke persona's zijn opt-in

Voor alle duidelijkheid: de 'videochat'-versie van Personas (met het frame) bestaat nog steeds. Het is zelfs de standaardmanier waarop avatars worden weergegeven wanneer een FaceTime-gesprek wordt gestart. Om over te schakelen naar een ruimtelijke persona moet je op een knop in het FaceTime-menu drukken.

En hoewel dit misschien een vreemde keuze lijkt, denk ik eigenlijk dat er iets aan de hand is.

Aan de ene kant voelt de standaard ‘FaceTime in Vision Pro’-ervaring als een videochat. In het dagelijks leven zijn we er inmiddels allemaal behoorlijk aan gewend om iemand anders aan de andere kant van de webcam te zien. En ook al is dit persoonlijker dan een gesprek met alleen audio, het is nog steeds een stap verwijderd van een daadwerkelijke ontmoeting met iemand persoonlijk.

Bij Ruimtelijke Persona's lijkt het meer alsof je elkaar daadwerkelijk persoonlijk ontmoet, omdat je de interpersoonlijke ruimte tussen jou en de andere mensen in deze gedeelde ruimte daadwerkelijk kunt voelen. Als ze naar boven lopen en een beetje krijgen te dichtbij, je zult het echt op dezelfde manier voelen als iemand in het echte leven te dicht bij je staat.

Het is dus fijn om beide opties te hebben. Ik kan 'videochatten' met iemand in de normale modus, of ik kan hem of haar in mijn ruimte uitnodigen als de situatie om een ​​meer persoonlijke ontmoeting vraagt.

En ruimtelijke persona's zijn niet alleen om te chatten. Net als gewone Persona's kun je SharePlay gebruiken terwijl je FaceTime gebruikt om samen films te kijken en games te spelen (op voorwaarde dat jullie allebei een ondersteunde app hebben geïnstalleerd).

Nemen Vrije vorm bijvoorbeeld de collaboratieve digitale whiteboard-app van Apple. Als je start Vrije vorm tijdens een FaceTime-gesprek met Spatial Personas wordt alle anderen gevraagd om deel te nemen aan de app, waardoor iedereen voor het whiteboard wordt geladen.

Alles is ook gesynchroniseerd. Alle anderen in het gesprek kunnen zien wat u op het whiteboard heeft gezet en kunnen in realtime meekijken terwijl u nieuwe foto's toevoegt of aantekeningen maakt. En net zo gemakkelijk kan iedereen fysiek naar het bord lopen en er zelf mee communiceren.

Als het gaat om het delen van films op Apple TV met Vision Pro, ontgrendelen Spatial Persona's het gevoel samen op dezelfde bank te zitten, wat bij de lancering niet helemaal mogelijk was met de headset. Als je nu een film kijkt met je vrienden, zit je schouder aan schouder met hen, wat heel anders voelt dan een raam met hun gezicht erin zwevend naast de video die je bekijkt.

Het is mogelijk om veel platte apps naar iedereen in het FaceTime-gesprek te streamen terwijl je Spatial Persona's gebruikt, maar voor 3D- of interactieve inhoud moeten ontwikkelaars de functie speciaal implementeren.

Dat is echter enigszins problematisch omdat het moeilijk is om precies te weten welke apps Spatial Persona's of zelfs SharePlay ondersteunen. Vanaf nu moet je helemaal naar de onderkant van de pagina van een app scrollen om te zien of deze SharePlay ondersteunt (tenzij de ontwikkelaar dit vermeldt in de beschrijving van de app). En zelfs dan betekent dit niet noodzakelijkerwijs dat het ruimtelijke persona's ondersteunt.

De kleine details

Apple heeft ook over enkele kleinere details voor Spatial Persona's nagedacht, waarvan 'voortbeweging' misschien wel de meest interessante is.

Beweging op kamerschaal is in wezen de standaard. Als je dichter bij een persoon of app wilt komen, loop je er gewoon fysiek naartoe. Maar wat gebeurt er als het zich buiten de grenzen van uw fysieke ruimte bevindt? Nou ja, in plaats van direct te bewegen jezelf virtueel kun je feitelijk de hele gedeelde ruimte dichter of verder van je af verplaatsen.

U kunt dit op elk gewenst moment en in elke app doen, en alle anderen zullen uw nieuwe positie daarin weerspiegeld zien hun ruimte, waardoor alles gesynchroniseerd blijft.

Apple heeft dit ook zo gemaakt dat wanneer twee ruimtelijke persona's te dicht bij elkaar komen, ze er tijdelijk weer uitzien als een zwevende contactfoto. Ik denk dat dit waarschijnlijk komt omdat ze mogelijke intimidatie of trollen willen vermijden (dat wil zeggen: je wilt iemand irriteren, zodat je je virtuele hand dwars door hun virtuele gezicht beweegt, wat zowel visueel als vanuit het oogpunt van de interpersoonlijke ruimte ongemakkelijk is).

De uitstekende ruimtelijke audio van de headset is uiteraard standaard inbegrepen, zodat iedereen klinkt alsof hij vandaan komt, waar hij ook staat in de kamer, en zijn stemmen klinken alsof hij zich in de kamer bevindt. jouw kamer (gebaseerd op de inschatting van de headset van hoe de akoestiek zou moeten klinken). En als je naar een volledig meeslepende ruimte zoals een 'omgeving' gaat, gaat de ruimtelijke audio over naar die nieuwe akoestische omgeving - zodat je bijvoorbeeld mensen vaag kunt horen echoën in de Joshua Tree-omgeving vanwege alle rotsoppervlakken in de buurt. Het is een subtiel stukje magie om de akoestiek te horen vervagen van het zijn in je eigen kamer naar het 'buiten' zijn in een omgeving.

Apple upgradet persona's voor echte face-to-face chats op Vision Pro PlatoBlockchain Data Intelligence. Verticaal zoeken. Ai.
Met dank aan Apple

En last but not least is het mogelijk om een ​​gemengde groep FaceTime-deelnemers te hebben. Je zou bijvoorbeeld mensen kunnen hebben die een iPhone of een Android-tablet gebruiken (ja dat kan FaceTime met mensen op niet-Apple-apparaten), een normale Persona en een Ruimtelijke Persona tegelijk. SharePlay werkt in dat geval ook tussen die formaten (behalve niet-Apple-apparaten), zolang de app dit ondersteunt. In gevallen met apps die Vision Pro-native zijn, krijgt de iPhone-gebruiker een melding dat zijn apparaat niet wordt ondersteund.

- - - - -

Spatial Personas is een grote upgrade van Apple's avatarsysteem, maar het bedrijf beweert dat het hele Persona-systeem nog in 'bèta' verkeert. Vermoedelijk betekent dit dat er nog meer verbeteringen moeten komen.

Tijdstempel:

Meer van Weg naar VR