Quest 3 Passthrough s'améliorera « modestement » avec les mises à jour

Quest 3 Passthrough s'améliorera « modestement » avec les mises à jour

Horodatage: 24 octobre 2023 10h01
Quest 3 Passthrough s'améliorera « modestement » avec les mises à jour PlatoBlockchain Data Intelligence. Recherche verticale. Aï.

Le relais de Quest 3 s'améliorera au fil du temps avec les mises à jour logicielles, selon le CTO de Meta.

Interrogé sur les améliorations potentielles du passthrough dans un AMA Instagram (demandez-moi n'importe quoi) hier, Andrew Bosworth a répondu :

« Oui, cela continuera à s'améliorer à mesure que nous continuerons à obtenir des conditions d'éclairage et des informations réelles à partir des casques qui ont été captés, nous commencerons à régler les algorithmes qui le pilotent plus efficacement.

Et donc je pense que cela continuera à s'améliorer – modestement – ​​à partir d'ici pendant un petit moment à mesure que nous faisons un meilleur travail d'estimation de la profondeur avec où se trouvent vos mains et en travaillant avec la distorsion autour de cela, et des choses comme ça.

Alors oui, nous allons continuer à travailler dessus comme nous l'avons fait avec le Quest Pro.

Bien que le Quest 3 soit sans doute le premier casque grand public doté d'un relais dans lequel vous voudriez passer plus de quelques minutes, dans notre examen nous avons souligné les défauts notables qui le rendent très loin d'une optique transparente.

Bien que le passthrough soit correct en profondeur et en échelle pour les objets et les paysages situés plus loin que la longueur d'un bras, et présente une latence et une stabilité incroyablement faibles, à courte distance, il présente une déformation géométrique et une double image sur les objets en mouvement. Cela est clairement visible sur vos mains et vos bras, et signifie que même si la résolution de l'appareil photo est à peu près suffisante pour lire du texte, vous ne voudrez pas utiliser votre téléphone longtemps car il apparaît considérablement déformé d'une manière différente pour chaque œil.

La déformation et les images fantômes semblent encore pires dans le casque que dans un enregistrement.

Cette déformation est en partie le résultat de la très faible résolution du champ d’estimation de profondeur généré par le système pour reprojeter les vues de la caméra couleur. Il fonctionne en comparant les vues des deux caméras en niveaux de gris à latence inférieure. L'estimation de profondeur de Quest Pro produit 10,000 3 points par image, et Meta n'a pas encore donné de chiffre pour Quest XNUMX.

Les commentaires de Bosworth suggèrent que la précision ou la résolution de l'estimation de la profondeur de Quest 3 pourrait être améliorée dans les prochaines mises à jour logicielles. Si cela se produit, cela améliorerait également la qualité du projet actuellement expérimental. fonction d'occlusion dynamique.

Pourtant, Bosworth a tempéré les attentes en utilisant le mot « modestement » dans sa réponse. Bien que le logiciel puisse s'améliorer, la pile passthrough de Meta sera toujours limitée par les caméras du casque Quest 3 et le chipset Snapdragon XR2 Gen 2. Mon collègue Ian rapporte que la distorsion n'était pas visible dans son bref passage avec Vision Pro, mais Apple utilise un chipset secondaire dédié pour traiter le relais et davantage de capteurs (probablement de meilleure qualité). Bien sûr, cela explique également en partie pourquoi le prix débutera à sept fois le prix.

Horodatage:

Plus de UploadVR