Apple aktualisiert Personas für echte persönliche Chats auf Vision Pro

Neuauflage von Plato

Verfolger: 0

Apple hat heute „Spatial Personas“ in der öffentlichen Betaversion von Vision Pro veröffentlicht. Das neu aktualisierte Avatar-System kann jetzt Menschen direkt in Ihr Zimmer bringen. Wir haben einen ersten Blick darauf geworfen.

Es wurde viel über Apples Persona-Avatarsystem für Vision Pro gesagt. Egal, ob Sie sie unheimlich oder passabel finden, eines ist sicher: Es handelt sich um das fotorealistischste Echtzeit-Avatarsystem, das in jedes derzeit erhältliche Headset integriert ist. Und jetzt wird Personas durch „Spatial Personas“ erweitert.

Aber waren Personas nicht schon „räumlich“? Lassen Sie mich erklären.

Irgendwie räumlich

Bei der Markteinführung ermöglichte das Persona-System Benutzern, ihre Gesichter in das Headset einzuscannen, um dank der Vielzahl von Sensoren in Vision Pro eine digitale Identität zu erstellen, die wie der Benutzer aussieht und sich bewegt. Wenn Sie einen FaceTime-Anruf mit einem oder mehreren anderen Vision Pro-Benutzern führen, werden Kopf, Schultern und Hände der Persona(s) in einem schwebenden Feld angezeigt.

Apple aktualisiert Personas für echte persönliche Chats auf Vision Pro PlatoBlockchain Data Intelligence. Vertikale Suche. Ai. — Bild mit freundlicher Genehmigung von Apple

Während dies manchmal wie ein Gespräch von Angesicht zu Angesicht wirken konnte, wirkte es aufgrund der Tatsache, dass sie in einem Rahmen enthalten waren (den Sie wie jedes andere Fenster verschieben oder in der Größe ändern können), so, als ob dies nicht der Fall wäre direkt neben dir stehen. Und das liegt nicht nur am Rahmen, sondern auch daran, dass man sich nicht wirklich im selben Raum wie sie befand – es ist nicht so, dass sie für einen High-Five direkt auf einen zugehen könnten, weil sie dann darin stecken blieben Fenster auf Ihrem Bildschirm.

Gespräche von Angesicht zu Angesicht

Mit Spatial Personas (heute als Betaversion für die neueste Version von VisionOS veröffentlicht) wird der Avatar jeder Person jetzt in einem gemeinsamen Raum ohne Rahmen gerendert. Wenn ich „gemeinsamer Raum“ sage, meine ich, dass ich tatsächlich sehe, wie jemand, der in seinem Zimmer einen Schritt auf mich zukommt, einen Schritt näher an mich herankommt.

Bisher vermittelte der Rahmen das Gefühl, einen 3D-Video-Chat zu führen. Jetzt, wo der gemeinsame Raum und kein Rahmen vorhanden sind, hat man wirklich das Gefühl, direkt nebeneinander zu stehen. Es ist das Erlebnis „auf derselben Couch rumhängen“ oder „sich am selben Tisch versammeln“, was beim Start von Vision Pro eigentlich nicht möglich war.

Und es ist wirklich ziemlich überzeugend. Ich habe einen ersten Blick auf das neue System in einem Vision Pro FaceTime-Anruf mit vier Personen (obwohl insgesamt bis zu fünf unterstützt werden) erhalten, die alle Spatial Personas verwendeten. Sie werden immer noch nur ihren Kopf, ihre Schultern und ihre Hände sehen, aber jetzt fühlt es sich wirklich wie ein Gedränge statt wie ein 3D-Video-Chat an. Es fühlt sich viel persönlicher an.

Spatial Personas sind optional

Um es klarzustellen: Die „Video-Chat“-Version von Personas (mit dem Rahmen) existiert immer noch. Tatsächlich ist dies die Standardmethode, mit der Avatare angezeigt werden, wenn ein FaceTime-Anruf gestartet wird. Um zu einer Spatial Persona zu wechseln, muss eine Schaltfläche im FaceTime-Menü gedrückt werden.

Und obwohl dies wie eine seltsame Wahl erscheinen mag, glaube ich tatsächlich, dass da etwas dran ist.

Einerseits fühlt sich das standardmäßige „FaceTime in Vision Pro“-Erlebnis wie ein Video-Chat an. Im Geschäftsalltag sind wir mittlerweile alle daran gewöhnt, jemand anderen auf der anderen Seite der Webcam zu sehen. Und auch wenn dies persönlicher ist als ein reines Audiogespräch, ist es immer noch ein kleiner Schritt davon entfernt, tatsächlich jemanden zu treffen persönlich.

Spatial Personas ähneln eher einem persönlichen Treffen, da Sie in diesem gemeinsamen Raum den zwischenmenschlichen Raum zwischen Ihnen und den anderen Menschen tatsächlich spüren können. Wenn sie hinaufgehen und ein wenig bekommen zu nah, werden Sie es wirklich genauso empfinden, wenn Ihnen im wirklichen Leben jemand zu nahe steht.

Daher ist es schön, beide Optionen zu haben. Ich kann im regulären Modus mit jemandem per Video-Chat chatten oder ihn einfach in meinen Raum einladen, wenn die Situation ein persönlicheres Treffen erfordert.

Und Spatial Personas dienen nicht nur dem Chatten. Genau wie bei normalen Personas können Sie SharePlay während der Nutzung von FaceTime verwenden, um gemeinsam Filme anzusehen und Spiele zu spielen (vorausgesetzt, Sie haben beide eine unterstützte App installiert).

Nehmen Freiform- zum Beispiel die kollaborative digitale Whiteboard-App von Apple. Wenn Sie starten Freiform- Während eines FaceTime-Anrufs mit Spatial Personas werden alle anderen aufgefordert, der App beizutreten, die dann alle vor dem Whiteboard lädt.

Auch alles ist synchronisiert. Jeder andere Teilnehmer des Anrufs kann sehen, was Sie auf das Whiteboard geschrieben haben, und in Echtzeit zusehen, wie Sie neue Fotos hinzufügen oder Anmerkungen zeichnen. Und genauso einfach kann jeder physisch an die Tafel herantreten und selbst damit interagieren.

Beim gemeinsamen Ansehen von Filmen auf Apple TV auf Vision Pro vermitteln Spatial Personas das Gefühl, gemeinsam auf derselben Couch zu sitzen, was mit dem Headset zum Start nicht ganz möglich war. Wenn Sie jetzt mit Ihren Freunden einen Film ansehen, sitzen Sie Seite an Seite mit ihnen, was sich ganz anders anfühlt, als wenn ein Fenster mit ihrem Gesicht darin in der Nähe des Videos schwebt, das Sie gerade ansehen.

Es ist möglich, viele flache Apps an jeden im FaceTime-Anruf zu streamen, während man Spatial Personas verwendet, aber für 3D- oder interaktive Inhalte müssen Entwickler die Funktion speziell implementieren.

Das ist jedoch etwas problematisch, da es schwierig ist, genau zu wissen, welche Apps Spatial Personas oder sogar SharePlay unterstützen. Ab sofort müssen Sie auf der Seite einer App ganz nach unten scrollen, um zu sehen, ob sie SharePlay unterstützt (es sei denn, der Entwickler erwähnt dies in der Beschreibung der App). Und selbst dann bedeutet dies nicht unbedingt, dass Spatial Personas unterstützt werden.

Die kleinen Details

Apple hat sich auch einige kleinere Details für Spatial Personas überlegt, das vielleicht interessanteste davon ist „Fortbewegung“.

Die Fortbewegung im Raummaßstab ist im Wesentlichen die Standardeinstellung. Wenn Sie näher an eine Person oder App heranrücken möchten, gehen Sie einfach physisch darauf zu. Aber was passiert, wenn es außerhalb der Grenzen Ihres physischen Raums liegt? Nun, anstatt direkt umzuziehen sich selbst Virtuell können Sie den gesamten Gemeinschaftsraum tatsächlich näher oder weiter von Ihnen entfernen.

Sie können dies jederzeit und in jeder App tun, und alle anderen sehen darin Ihre neue Position ihr Platz und sorgt dafür, dass alles synchronisiert bleibt.

Apple hat außerdem Folgendes vorgenommen: Wenn zwei Spatial Personas zu nahe beieinander kommen, sehen sie vorübergehend wieder nur noch wie ein schwebendes Kontaktfoto aus. Ich denke, das liegt wahrscheinlich daran, dass sie mögliche Belästigungen oder Trolling vermeiden wollen (z. B. Sie möchten jemanden ärgern, also führen Sie Ihre virtuelle Hand direkt durch sein virtuelles Gesicht, was sowohl optisch als auch vom Standpunkt des zwischenmenschlichen Raums aus unangenehm ist).

Der hervorragende räumliche Klang des Headsets ist selbstverständlich standardmäßig enthalten, so dass es für alle klingt, als kämen sie von überall im Raum, und ihre Stimmen klingen tatsächlich so, als wären sie im Raum Ihr Zimmer (basierend auf der Schätzung des Headsets, wie die Akustik klingen sollte). Und Wenn Sie sich in einen vollständig immersiven Raum wie eine „Umgebung“ bewegen, geht der räumliche Klang in diese neue akustische Umgebung über – so können Sie beispielsweise aufgrund der vielen Felsoberflächen in der Nähe Menschen in der Joshua Tree-Umgebung ein schwaches Echo hören. Zu hören, wie die Akustik von der Atmosphäre im eigenen Raum zur Atmosphäre „draußen“ abklingt, ist ein subtiles Stück Magie.

Und zu guter Letzt ist es möglich, eine gemischte Gruppe von FaceTime-Teilnehmern zu haben. Sie könnten zum Beispiel Leute haben, die ein iPhone oder ein Android-Tablet verwenden (ja, das können Sie). FaceTime mit Menschen auf Geräten, die nicht von Apple stammen), eine normale Persona und eine räumliche Persona gleichzeitig. SharePlay funktioniert in diesem Fall auch zwischen diesen Formaten (mit Ausnahme von Geräten, die nicht von Apple stammen), sofern die App dies unterstützt. Bei nativen Vision Pro-Apps erhält der iPhone-Benutzer eine Benachrichtigung, dass sein Gerät nicht unterstützt wird.

- - - - -

Spatial Personas ist ein großes Upgrade des Avatar-Systems von Apple, das Unternehmen behauptet jedoch, dass sich das gesamte Persona-System noch in der „Beta“-Phase befindet. Vermutlich bedeutet das, dass noch weitere Verbesserungen bevorstehen.