Vision Pro 開発者が投稿したビデオは、Apple の新しいヘッドセットが可能なハンドトラッキングとオクルージョンのパフォーマンスの現在のレベルを示しているようです。
アップルビジョンプロ、 今後数か月以内に発売される予定は、主な入力方法としてハンド トラッキングを使用します。システムレベルのインタラクションでは、ハンドトラッキングとアイトラッキングを組み合わせて「見てタップ」というモダリティを実現しますが、開発者は、ユーザーが手を使ってアプリケーションと直接対話できるアプリケーションを構築することもできます。
Vision Pro でのハンドトラッキングは、「ハンドトラッキング」と「ハンドオクルージョン」という XNUMX つの異なる機能に分類できます。
ハンドトラッキングは、手、その関節、指先の位置の推定 3D モデルです。このモデルは、オブジェクトがいつ触れられ、掴まれ、相互作用されたかを判断するために使用されます。
ハンドオクルージョンは、システムが実際の手を仮想コンテンツにオーバーレイする方法を扱います。 Vision Pro は、仮想の手の 3D モデルをシーンに描画するのではなく、実際の手の画像を切り取ってシーンに表示します。そうすることで、自分自身のユニークな手を確認できるため、仮想コンテンツにリアリズムがさらに加わります。
Unity を使用して Vision Pro を構築している開発者が、ハンド トラッキングとオクルージョンの両方を明確に示すビデオを投稿しました。
上のビデオでは、実際の手は動作中のオクルージョン システムを示しており、緑色の点は手の推定 3D 位置を示しています。
ハンド オクルージョンは非常に優れていますが、完璧ではないことがわかります。仮想コンテンツに完全に囲まれて素早く移動すると、手の端の周りにクリッピングが見られることがあります。
一方、実際のハンド トラッキング位置はハンド オクルージョンよりさらに遅れ、約 100 ~ 200 ミリ秒遅れます。ただし、比較対象となるオクルージョン トラッキングの手のビューしかないため、Vision Pro のハンド トラッキングの実際のレイテンシーを完全に判断することはできません (実際の手に関しては、それ自体に多少のレイテンシーがあります)。
これに関連して、このビデオは、Unity 開発者の会話からのもので、Vision Pro を使用した初期の実験では、明らかに最新の Quest ハンド トラッキング機能と比較して、非常に高いハンド トラッキング レイテンシが示されたと述べています。他の Unity 開発者も、自分の Vision Pro デバイスで同様の遅延が発生していることに同意しました。
ただし、問題のビデオは Unity アプリ内のハンド トラッキング統合です。つまり、ハンド トラッキングのパフォーマンスと遅延には、Apple のファーストパーティ Vision Pro 開発ツールを使用する場合には存在しない、Unity に関連する追加の要素が含まれる可能性があります。また、ヘッドセットがまだ発売されておらず、これらのツールがまだ開発中であることを考慮すると、ヘッドセットが実際に店頭に並ぶまでにさらなる改善が見られるかもしれません。
- SEO を活用したコンテンツと PR 配信。 今日増幅されます。
- PlatoData.Network 垂直生成 Ai。 自分自身に力を与えましょう。 こちらからアクセスしてください。
- プラトアイストリーム。 Web3 インテリジェンス。 知識増幅。 こちらからアクセスしてください。
- プラトンESG。 カーボン、 クリーンテック、 エネルギー、 環境、 太陽、 廃棄物管理。 こちらからアクセスしてください。
- プラトンヘルス。 バイオテクノロジーと臨床試験のインテリジェンス。 こちらからアクセスしてください。
- 情報源: https://www.roadtovr.com/apple-vision-pro-unity-hand-tracking-occlusion/
- :は
- :not
- 3d
- a
- 上記の.
- Action
- 実際の
- 実際に
- NEW
- 追加
- 同意して
- 許す
- また
- および
- 別の
- アプリ
- 登場する
- Apple
- です
- 周りに
- AS
- At
- BE
- なぜなら
- 背後に
- 両言語で
- 壊れた
- ビルド
- 建物
- 焙煎が極度に未発達や過発達のコーヒーにて、クロロゲン酸の味わいへの影響は強くなり、金属を思わせる味わいと乾いたマウスフィールを感じさせます。
- by
- 缶
- 機能
- できる
- クリア
- 組み合わせる
- comes
- 比較します
- 比較
- 考えると
- コンテンツ
- コンテキスト
- 会話
- 電流プローブ
- カット
- 特価
- 決定する
- Developer
- 開発者
- 開発
- 開発ツール
- Devices
- 直接に
- 明確な
- すること
- 描画
- 早い
- 完全に
- 推定
- 実験
- 要因
- 少数の
- 指先
- から
- さらに
- 与える
- 垣間見ます
- 良い
- グリーン
- ハンド
- ハンド
- 持ってる
- ヘッドセット
- ハイ
- 認定条件
- しかしながら
- HTTPS
- 画像
- 改善
- in
- 内部
- を取得する必要がある者
- 統合
- 対話
- 相互作用
- に
- IT
- ITS
- レイテンシ
- 最新の
- 起動する
- 打ち上げ
- 層
- レベル
- 見て
- 五月..
- 手段
- 方法
- 移動する
- 新作
- 新しいヘッドセット
- 次の
- オブジェクト
- of
- オファー
- on
- の
- 〜に
- その他
- でる
- 自分の
- 完璧
- パフォーマンス
- プラトン
- プラトンデータインテリジェンス
- プラトデータ
- 位置
- 掲示
- 現在
- 主要な
- Pro
- クエスト
- クエストハンドトラッキング
- 質問
- すぐに
- 非常に
- むしろ
- 達します
- リアル
- リアリズム
- 見なす
- 格言
- シーン
- 見ること
- 表示する
- 示されました
- 同様の
- So
- 一部
- どこか
- まだ
- 店舗
- 囲まれた
- より
- それ
- アプリ環境に合わせて
- それら
- 自分自身
- ボーマン
- 彼ら
- この
- 時間
- 〜へ
- 豊富なツール群
- 触れ
- true
- 2
- ユニーク
- ユニティ
- つかいます
- 中古
- users
- 非常に
- ビデオ
- 詳しく見る
- バーチャル
- ビジョン
- we
- した
- いつ
- which
- while
- 意志
- まだ
- You
- あなたの
- ゼファーネット