Meta Araştırmacıları Ekstra İzleyici Olmadan Quest 2 Vücut Takibini Gösteriyor

Meta araştırmacıları ekstra izleyiciler olmadan Quest 2 vücut takibini gösterdi.

Mevcut VR sistemleri bir başlık ve tutulan kumandalarla birlikte gelir; bu nedenle yalnızca başınızın ve ellerinizin konumunu takip edin. Dirseklerinizin, gövdenizin ve bacaklarınızın konumu, ters kinematik (IK) adı verilen bir algoritma sınıfı kullanılarak tahmin edilebilir, ancak bu yalnızca bazen dirsekler için doğrudur ve nadiren bacaklar için doğrudur. Verilen her baş ve el konumu seti için çok fazla potansiyel çözüm vardır.

IK'nin sınırlamaları göz önüne alındığında, bazı Günümüzde VR uygulamaları yalnızca ellerinizi gösteriyor ve birçoğu size yalnızca üst gövdeyi gösteriyor. SteamVR izlemeyi kullanan PC kulaklıkları, aşağıdaki gibi aşınmış ekstra izleyicileri destekler: HTC'nin Vive Tracker'ı, ancak vücut takibi için gereken üçünün maliyeti 350 doların üzerindedir ve bu nedenle bu çoğu oyunda desteklenmez.

Ancak bölgesindeki QuestSim başlıklı yeni bir makaleMeta araştırmacıları, yalnızca Quest 2 ve kontrolörlerinden gelen izleme verileriyle makul bir tam vücut pozunu tahmin edebilen, sinir ağı tarafından yönlendirilen bir sistem gösterdi. Ekstra izleyicilere veya harici sensörlere gerek yoktur.

Ortaya çıkan avatar hareketi, kullanıcının gerçek hareketine oldukça yakın bir şekilde eşleşir. Araştırmacılar, ortaya çıkan doğruluk ve titreşimin, Pico 4'ün duyurduğu gibi yalnızca ivmeölçer ve jiroskopa sahip olan eski IMU takip cihazlarından daha üstün olduğunu bile iddia ediyorlar. Pico Spor Bandı (Pico kendi makine öğrenimi algoritması üzerinde çalıştığını iddia ediyor).

Bununla birlikte, burada bir yakalama var. Videoda görüldüğü gibi bu sistem, akla yatkın bir sonuç üretmeyi önceliklendirecek şekilde tasarlanmıştır. tüm vücut Avatar ellerinin kullanıcının ellerinin tam konumuyla eşleştiğinden emin olmak için poz verin. Sistemin gecikmesi de 160 ms'dir; yani 11 Hz'de 72 kareden fazladır. Bu sorunlar göz önüne alındığında QuestSim, aşağıya baktığınızda kendi vücudunuzu görmek için değil, yalnızca diğer insanların avatar vücutlarını görmek için uygun olacaktır.

Ancak yine de, diğer insanların avatarlarının tüm vücut hareketlerini görmek, Meta'nın mevcut avatarlarının sıklıkla eleştirilen bacaksız üst gövdelerine göre çok daha tercih edilebilir olacaktır. Peki bu sistem veya buna benzer bir şey Quest 2'ye gelecek mi?

Meta CTO Andrew Bosworth geçen hafta kesinlikle bunu ima ediyor gibi görünüyordu. Ne zaman Instagram'da bacak takibi hakkında soru soruldu "bana bir şey sor" Bosworth yanıtladı:

"Evet, bacaksız avatarlarla çok dalga geçiyoruz ve bence bu çok adil ve bence oldukça komik.

Kendi avatarında gerçek bacaklarına uymayan bacakların olması insanları çok rahatsız ediyor. Ama tabii ki diğer insanlara ayak uydurabiliyoruz, gördüğünüz gibi ve bu sizi hiç rahatsız etmiyor.

Bu yüzden, etraftaki biri için doğal görünen bacaklar üzerinde çalışıyoruz - çünkü onlar gerçek bacaklarınızın gerçekte nasıl konumlandığını bilmiyorlar - ama muhtemelen kendi bacaklarınıza baktığınızda hiçbir şey görmeyeceksiniz. Mevcut stratejimiz bu.”

Ancak kısa vadeli çözüm bu algoritmayla aynı kalitede olmayabilir. Makine öğrenimi araştırma makaleleri güçlü PC GPU'larında nispeten düşük kare hızında çalışma eğilimindedir. Belgede açıklanan sistemin performansından bahsedilmiyor ancak RTX 3080'in eğitim için kullanıldığı belirtiliyor.

Meta Connect yıllık AR/VR etkinliği gerçekleşiyor 2 haftadan biraz fazla bir sürededolayısıyla herhangi bir vücut takibi duyurusu muhtemelen bu sırada gerçekleşecektir.