Apple Vision Pro is controlled with eye tracking and hand gestures, but how exactly?
WWDC23 میں ڈویلپر بات چیت, Apple design engineers explained how your eyes and hands work together to control وژن پرو‘s visionOS.
In visionOS, your eyes are the targeting system, like moving your mouse or hovering your finger over a touchscreen.
User interface elements will react to looking at them to make clear they’ve been selected. Further, looking at a menu bar will expand that bar, and looking at a microphone icon will immediately trigger speech input.
Pinching your index finger and thumb together is the equivalent of clicking a mouse or pressing a touchscreen. This sends that “click” to whatever your eyes are looking at.
That’s obvious enough, but how then do you perform other critical tasks like scrolling?
To scroll, you keep your fingers pinched and flick your wrist up or down. To zoom in or out, you pinch with both hands close together then move each outwards. To rotate something, you do the same but upwards and downwards.
All of these gestures are guided by where you’re looking, so you can precisely control the user interface without having to hold your hands up in the air or use laser pointer controllers.
It’s a strikingly elegant approach to AR/VR interaction, made possible by Vision Pro’s combination of a TrueDepth hand tracking sensor suite and precise eye tracking. Theoretically کویسٹ پرو۔ could have taken a similar approach, but the camera-based hand tracking may not have been reliable enough and Meta may not have wanted to spend time on an interaction system that wouldn’t work on Quest 2 and 3, which both lack eye tracking.
Those who have tried Vision Pro report that this combination of eye selection and hand gestures made for more intuitive interaction system than any headset they’d tried before. In our hands-on time it “felt so good to see Apple get this so right”. It truly delivers on Apple’s “it just works” philosophy.
There are some tasks better achieved by directly using your hands though. For example, you enter text on visionOS by using both to type on a virtual keyboard. Other scenarios Apple recommends using “direct touch” for include inspecting & manipulating small 3D objects and recreating real world interactions.
Meta is also moving towards direct touch with its Quest system software. But it’s using it for all interactions, mimicking a touchscreen, instead of only for certain specific tasks. This doesn’t require eye tracking but does require holding your hands up in the air, which becomes fatiguing over time.
- SEO سے چلنے والا مواد اور PR کی تقسیم۔ آج ہی بڑھا دیں۔
- ای وی ایم فنانس۔ وکندریقرت مالیات کے لیے متحد انٹرفیس۔ یہاں تک رسائی حاصل کریں۔
- کوانٹم میڈیا گروپ۔ آئی آر/پی آر ایمپلیفائیڈ۔ یہاں تک رسائی حاصل کریں۔
- پلیٹوآئ اسٹریم۔ ویب 3 ڈیٹا انٹیلی جنس۔ علم میں اضافہ۔ یہاں تک رسائی حاصل کریں۔
- ماخذ: https://www.uploadvr.com/apple-vision-pro-gesture-controls/
- : ہے
- : نہیں
- :کہاں
- $UP
- 3d
- 7
- a
- حاصل کیا
- AIR
- تمام
- بھی
- an
- اور
- کوئی بھی
- ایپل
- نقطہ نظر
- آر / وی آر
- کیا
- At
- بار
- ہو جاتا ہے
- رہا
- اس سے پہلے
- بہتر
- دونوں
- لیکن
- by
- کر سکتے ہیں
- کچھ
- واضح
- کلک کریں
- کلوز
- COM
- مجموعہ
- کنٹرول
- کنٹرول
- سکتا ہے
- اہم
- فراہم کرتا ہے
- ڈیزائن
- براہ راست
- براہ راست
- do
- کرتا
- نہیں
- نیچے
- ہر ایک
- عناصر
- انجینئرز
- کافی
- درج
- مساوی
- بالکل
- مثال کے طور پر
- توسیع
- توسیع
- وضاحت کی
- آنکھ
- آنکھ سے باخبر رہنے کے
- آنکھیں
- انگلی
- فلک
- کے لئے
- مزید
- حاصل
- اچھا
- ہاتھ
- ہاتھ سے باخبر رہنے کے
- ہاتھوں
- ہاتھوں پر
- ہے
- ہونے
- ہیڈسیٹ
- پکڑو
- انعقاد
- کس طرح
- HTTPS
- آئکن
- تصویر
- فوری طور پر
- in
- شامل
- انڈکس
- ان پٹ
- کے بجائے
- بات چیت
- بات چیت
- انٹرفیس
- بدیہی
- IT
- میں
- فوٹو
- صرف
- رکھیں
- نہیں
- لیزر
- کی طرح
- تلاش
- بنا
- بنا
- جوڑ توڑ
- مئی..
- مینو
- میٹا
- مائکروفون
- زیادہ
- منتقل
- منتقل
- اشیاء
- واضح
- of
- on
- صرف
- or
- دیگر
- باہر
- پر
- انجام دیں
- فلسفہ
- پلاٹا
- افلاطون ڈیٹا انٹیلی جنس
- پلیٹو ڈیٹا
- ممکن
- عین مطابق
- ٹھیک ہے
- دبانے
- فی
- تلاش
- جستجو 2۔
- RE
- جواب دیں
- اصلی
- حقیقی دنیا
- تجویز ہے
- قابل اعتماد
- رپورٹ
- کی ضرورت
- ٹھیک ہے
- s
- اسی
- منظرنامے
- سکرال
- طومار کرنا
- دیکھنا
- منتخب
- انتخاب
- بھیجتا ہے
- اسی طرح
- چھوٹے
- So
- سافٹ ویئر کی
- کچھ
- کچھ
- مخصوص
- تقریر
- خرچ
- سویٹ
- کے نظام
- لیا
- ھدف بندی
- کاموں
- سے
- کہ
- ۔
- ان
- تو
- یہ
- وہ
- اس
- اگرچہ؟
- وقت
- کرنے کے لئے
- مل کر
- چھو
- کی طرف
- ٹریکنگ
- کوشش کی
- ٹرگر
- واقعی
- قسم
- UploadVR
- اوپر
- استعمال کی شرائط
- رکن کا
- صارف مواجہ
- کا استعمال کرتے ہوئے
- Ve
- مجازی
- نقطہ نظر
- چاہتے تھے
- جو کچھ بھی
- جس
- ڈبلیو
- گے
- ساتھ
- بغیر
- کام
- مل کے کام کرو
- کام کرتا ہے
- دنیا
- تم
- اور
- زیفیرنیٹ
- زوم
- زومنگ