アイデアエンジン VR および複合現実体験を作成して共有できます。このような汎用ツールを構築するには、複雑なユーザー インターフェイスが必要です。このゲスト記事では、開発者の Brett Jackson が UI インタラクションへのアプローチを共有しています。
Brett Jackson は 2015 年から VR プロジェクトを開発しており、英国に拠点を置く新しい会社のディレクターです X82株式会社。彼の以前のリリースには、Dimensional (PC VR)、Breath Tech (PC VR)、Jigsaw 360 (PC VR およびモバイル VR)、120Hz (SideQuest) が含まれます。
XR では 2D インタラクティブ パネルを通じて UI を表示するのが一般的です。これは刺激的な見通しではありませんが、馴染みがあり効率的です。ただし、XR 世界への 2D の侵入を受け入れたとしても、2D パラダイムから抜け出すための新たな考慮事項と機会がまだあります。
私は、離れたパネル上で手の動きを誇張するレーザー ポインター、一貫性のないターゲット ベクトル、断続的なピンチ検出にすぐにうんざりしました。私の好みは、世界に手を伸ばして交流することです。パネルを目の前に配置して、快適に配置して実際のデバイスのように使用できるようにしたいと考えています。
私の最新のプロジェクト、 アイデアエンジンを使用して開発されています。 ステレオキット、オープンソースの OpenXR ライブラリ。ハンズファーストの理念を持ち、すぐに使用できるハンド トラッキング サポートとコントローラー サポートを提供します。これにより、一般的な UI コントロールを使用して動的ウィンドウを効率的に作成できます。これは、XR プロジェクトを迅速に作成するための優れたツールであり、他にも多くの利点があります。
パネル一覧
したがって、私の出発点は、いつでも掴むことができる (特別なハンドルやエッジを見つける必要はない) UI パネルであり、掴む範囲内にいるときに素晴らしいオーラが表示されます。ここで、XR に関する考慮事項をさらに追加しましょう。
XR では、ユーザーが UI パネルの背後にいてしまいがちです。空白の背面または反転した UI を表示するのではなく、シンプルに UI をユーザーが見ている側に反転します。些細なことのように聞こえますが、XR 固有のシナリオを検討する価値があります。もう 1 つのアプローチは、パネルを自動回転して常にプレーヤーの方を向くというものですが、これではユーザーが制御できなくなります。彼らがパネルを奇妙な角度にしたい場合は、彼らに任せてください。彼らには正当な理由があるかもしれません。
ユーザーが頭を振り向かなくてもコンテンツを簡単に吸収できるように、個々のパネルは小さいサイズ (ページ サイズ / モニター サイズ) に抑える必要がありますが、XR は豊富なスペースを提供します。私はページの境界を突破する機会を探すのが好きです。スクロール可能な領域には、コンテンツを取得して移動するためのハンドルがあります。掴まれている間は、コンテンツ領域が大幅に拡大されたビューが表示され、このモードではドラッグ アンド ドロップができるため、配置範囲が広がります。
パネルの側面にヒントを表示し、説明する UI コンポーネントへの線を付けます。これにより、パネル上のテキストの量が減ります。ユーザーはヒントを循環したり、よく知っているヒントを非表示にしたりできます。
別のプロジェクトでは、ページを水平方向にスクロールして遠くにフェードインする 3D ガント チャートのプロトタイプを作成しました。ユーザーの主な焦点は依然として通常サイズの中央パネルにありましたが、オプションでより広いコンテキストを取り込むことができました。
パネルは便利で馴染みのあるものではありますが、その限界に縛られる必要はなく、そこから抜け出す方法を探すのは楽しいことです。
メニュー
StereoKit はラジアル ハンド メニューを紹介し、それを拡張しました。このアイデアは片手で操作できるので便利でアクセスしやすいので気に入っています。一貫性を保つために、同じメニュー システムを右手と左手の両方で使用できるようにし、パネル上のポップアップ メニューにも同じアプローチを使用します。
私のボリュームメニューはさらに一歩進んでおり、純粋にその 3 次元を利用したいという願望によって動かされました。これを使用して、テレポートの宛先 (各宛先へのポインターを使用) を選択し、編集する近くのノードを選択します。メタバース アドレスを参照するときのキーボード入力にも使用します。これはかなり実験的なものです。すべての記号が中心から等距離にあり、目をそらすことなく入力を確認できるという利点があります (仮想キーボードの一般的な問題)。欠点は、ユーザーにとって馴染みがないため、多少の抵抗があることが予想されることです。ビデオでは、文字がアルファベット順に前から後ろに螺旋状に遠ざかっていることに注目してください。そのため、すぐにその位置に慣れるはずです。
このようなメニューを独自の Idea Engine プロジェクトに追加できるようになります。
3D ウィジェット
カラー ピッカーは、3 次元にマッピングできる 3 つの値 (色相、彩度、明度) を備えており、実験する理想的な機会を提供してくれました。私の 2D カラー ピッカーでは、XNUMX つの値すべてを一度に変更したり、色相、彩度、値を個別に設定したりできます。 XNUMXD ページ上のスライダーよりも操作するのが面白いと思います。
移動も同様に 3D で移動したいので、手で滑らかに移動できる 3D ジョイスティックを作成しました。移動したい方向に球をドラッグし、手首を回転させるだけでスナップまたはスムーズに回転できます。歩行モードまたは飛行モードで動作し、ユーザーがすべてを 3 つのコントロールで考えるのが面倒だと感じた場合は、回転を無効にすることができます。私は依然として従来のコントローラーベースの動きをサポートしていますが、この片手コントロールは複数のジョイスティック/ボタンの機能を複製しており、XNUMXD 手の動きがどのように新しい方法で要件を満たすことができるかを示す興味深い例です。
ハンド
私のすべてのサンプルビデオでは、ユーザーが UI との対話を開始するとすぐにユーザーの手を非表示にしていることがわかります。多くの開発者は、さまざまな目的に合わせてグラブ ポーズを慎重に作成することに労力を費やしており、それはきれいに見えますが、私にとっては、自分の手の位置を反映していない適切なポーズの手のほうが、手をまったく持たないよりも気が散ります。インタラクションが開始されると、手も視覚的な障害になる可能性があります。
手がなくなったので、視覚的な矛盾を生じることなく、手の動きを自由に弱めたり誇張したりすることもできます。カラーピッカーの手の動きを弱めて感度を下げ、コンテンツが多い場合にスクロールするときの手の動きを誇張します。
テキスト
Idea Engine は、3D モデルをダウンロードする Sketchfab、画像を生成する AI、写真/音声のインポートをサポートしていますが、複雑な物語を伝えるためのテキストと話し言葉の使いやすさとアクセシビリティに勝るものはありません。これを念頭に置いて、ユーザーが利用可能なすべての形式を結合してストーリーを伝えることができるように、テキストに対する適切なサポートが必要でした。
一般に、VR ではテキストは見栄えがよくないため、ユーザーが立ち去るときにテキストをフェードアウトして、見苦しいアーティファクトを削除し、テキスト パネルも閉じます。ユーザーはテキストを読むよりも環境を探索することに熱心なので、遭遇したブロック テキストをナレーターが自動的に読み上げるオプションを用意しています。
テキスト入力は、優れた解決策がなければ課題でした。仮想キーボードを使用して、カット アンド ペーストのサポートと自動ページネーションを備えたモバイル スタイルのテキスト入力を作成しました。終わったとき、それはそれでいい、でも XR で長い文章を入力したくない、と思いました。次に、音声からテキストへのサポートを追加しました。それは役に立ちましたが、ディクテーション後に多くの編集を行う必要があり、それでも従来の手段を使用するよりも時間がかかることがわかりました。今後は、ユーザーが所有するデバイスのブラウザからヘッドセットに接続し、Web ページ経由でテキストをインポートできるようになります。私は 3 つのテクニックすべてを定期的に使用しており、長いテキストの入力にはブラウザーを使用します。
ここで得た教訓は、必ずしもすべてを XR で解決する必要はないということです。場合によっては、より適切なデバイスを使用して結果をインポートする方が望ましい場合があります。
やってみよう
教育用マインド マップからインタラクティブなストーリーやゲームまで、CC アセットを活用し、独自の写真、サウンド、テキストをインポートしてアイデアを構築できます。次に、状態、イベント、高レベルのスクリプトを追加してそれを実現し、X82 メタバースで共有します。 XR の可能性を探求するための機能満載のエンドユーザー ツール。
パブリック アルファ版が公開され、App Lab で無料でダウンロードできますので、ここで説明した機能を試してみて、フィードバックを送ってください。
- SEO を活用したコンテンツと PR 配信。 今日増幅されます。
- PlatoData.Network 垂直生成 Ai。 自分自身に力を与えましょう。 こちらからアクセスしてください。
- プラトアイストリーム。 Web3 インテリジェンス。 知識増幅。 こちらからアクセスしてください。
- プラトンESG。 カーボン、 クリーンテック、 エネルギー、 環境、 太陽、 廃棄物管理。 こちらからアクセスしてください。
- プラトンヘルス。 バイオテクノロジーと臨床試験のインテリジェンス。 こちらからアクセスしてください。
- 情報源: https://www.roadtovr.com/xr-interface-interactions-idea-engine-brett-jackson/
- :持っている
- :は
- :not
- $UP
- 10
- 180
- 2015
- 2D
- 360
- 3d
- 3
- 7
- a
- できる
- 私たちについて
- 豊富
- 同意
- 接近性
- アクセス可能な
- 加えます
- 追加されました
- 追加
- アドレス
- 利点
- 後
- AI
- すべて
- 許す
- ことができます
- 沿って
- アルファ
- また
- 常に
- 量
- an
- および
- 別の
- どれか
- アプリ
- アプローチ
- アプローチ
- です
- AREA
- エリア
- 記事
- AS
- 資産
- At
- オーディオ
- オーラ
- オート
- 自動的に
- 利用できます
- 離れて
- バック
- BE
- ビート
- なぜなら
- になる
- き
- 背後に
- 利点
- ブロック
- 両言語で
- 境界
- 境界
- ブレーク
- 取り出す
- 息
- 持って来る
- ブラウザ
- ブラウジング
- ビルド
- 建物
- 焙煎が極度に未発達や過発達のコーヒーにて、クロロゲン酸の味わいへの影響は強くなり、金属を思わせる味わいと乾いたマウスフィールを感じさせます。
- by
- 缶
- 慎重に
- 中央の
- センター
- 挑戦する
- 変化する
- チャート
- 閉じる
- 来ます
- コマンドと
- 会社
- 複雑な
- コンポーネント
- 紛争
- お問合せ
- 検討事項
- 考えると
- 絶えず
- コンテンツ
- 中身
- コンテキスト
- コントロール
- コントローラ
- controls
- 便利
- 可能性
- 作ります
- 作成した
- 作成
- 創造
- カット
- サイクル
- 説明する
- 慾望
- デスティネーション
- 目的地
- 検出
- 発展した
- Developer
- 開発者
- 開発
- デバイス
- Devices
- 異なります
- 次元
- 大きさ
- 方向
- 取締役
- 無効
- 議論する
- 表示される
- 距離
- 遠い
- do
- そうではありません
- ドント
- ダウン
- ダウンロード
- ドリブン
- Drop
- 複製
- ダイナミック
- 各
- 緩和する
- 簡単に
- 簡単に
- 教育の
- 効率的な
- 努力
- end
- エンジン
- エントリ
- 環境
- さらに
- イベント
- すべてのもの
- 例
- 優れた
- エキサイティング
- 拡大
- 期待する
- エクスペリエンス
- 実験
- 実験的
- 探る
- 探る
- 顔
- フェード
- おなじみの
- 特徴
- フィードバック
- 感じます
- もう完成させ、ワークスペースに掲示しましたか?
- 発見
- フリップ
- 飛行
- フォーカス
- 発見
- 無料版
- から
- フロント
- 楽しいです
- 機能性
- さらに
- Games
- 一般的用途
- 一般に
- 生成する
- 与える
- 行って
- 良い
- グラブ
- 素晴らしい
- 大きい
- 大いに
- 成長しました
- ゲスト
- ゲスト記事
- ハンド
- ハンドトラッキング
- ハンドル
- ハンドル
- ハード
- 持ってる
- 持って
- ヘッドセット
- 助けました
- こちら
- 隠す
- ハイ
- 彼の
- 水平に
- 認定条件
- しかしながら
- HTTPS
- i
- アイデア
- 理想
- if
- 画像
- import
- インポート
- in
- include
- 個人
- 個別に
- 対話
- 相互作用
- 相互作用
- 相互作用
- 相互作用的
- 興味深い
- インタフェース
- インターフェース
- に
- 導入
- 投資する
- 問題
- IT
- Jackson (ジェームズ・ジャクソン)
- ジグソーパズル
- JPG
- キーン
- 保管
- レーザー
- 最新の
- 左
- レッスン
- う
- レベル
- 活用します
- 図書館
- 生活
- ような
- LINE
- 長い
- 見て
- 探して
- LOOKS
- たくさん
- 下側
- 製
- メイン
- make
- 多くの
- ゲレンデマップ
- 最大幅
- 五月..
- me
- 手段
- 大会
- メニュー
- マージ
- Meta
- メタバース
- マインド
- 混合
- 複合現実
- モバイル
- モード
- モデル
- モニター
- 他には?
- 運動
- ずっと
- の試合に
- my
- 物語
- 必要
- 必要とされる
- 新作
- nice
- いいえ
- ノード
- 知らせ..
- 今
- オクルス
- of
- オフ
- 提供
- on
- かつて
- ONE
- もの
- オープンソース
- 操作する
- 動作
- 機会
- 機会
- オプション
- or
- 注文
- その他
- 私たちの
- でる
- 自分の
- ページ
- ページネーション
- パネル
- パネル
- パラダイム
- 通過
- PC
- pc vr
- 哲学
- 写真
- 写真
- 配置
- プラトン
- プラトンデータインテリジェンス
- プラトデータ
- プレイヤー
- ポイント
- ポーズ
- 位置
- の可能性
- 好ましいです
- 現在
- 前
- プロジェクト
- プロジェクト(実績作品)
- 見通し
- は、大阪で
- 提供
- 純粋に
- 目的
- すぐに
- 非常に
- 範囲
- むしろ
- リーチ
- 読む
- 現実の世界
- 現実
- 理由
- 軽減
- 反映する
- 定期的に
- リリース
- 削除します
- 除去する
- 要件
- 必要
- 結果
- 右
- ロール
- 同じ
- シナリオ
- スクローリング
- select
- 感度
- セッションに
- シェアする
- 株式
- ショート
- すべき
- 表示する
- 側
- サイドクエスト
- 単に
- から
- サイズ
- 小さい
- スムーズ
- スナップ
- So
- 溶液
- 解決する
- 一部
- 時々
- すぐに
- 音
- スペース
- 特別
- 特定の
- 話
- start
- 開始
- 起動
- 米国
- 手順
- まだ
- ストーリー
- 奇妙な
- そのような
- 適当
- サポート
- サポート
- 取る
- 取り
- ターゲット
- テク
- テクニック
- 言う
- 클라우드 기반 AI/ML및 고성능 컴퓨팅을 통한 디지털 트윈의 기초 – Edward Hsu, Rescale CPO 많은 엔지니어링 중심 기업에게 클라우드는 R&D디지털 전환의 첫 단계일 뿐입니다. 클라우드 자원을 활용해 엔지니어링 팀의 제약을 해결하는 단계를 넘어, 시뮬레이션 운영을 통합하고 최적화하며, 궁극적으로는 모델 기반의 협업과 의사 결정을 지원하여 신제품을 결정할 때 데이터 기반 엔지니어링을 적용하고자 합니다. Rescale은 이러한 혁신을 돕기 위해 컴퓨팅 추천 엔진, 통합 데이터 패브릭, 메타데이터 관리 등을 개발하고 있습니다. 이번 자리를 빌려 비즈니스 경쟁력 제고를 위한 디지털 트윈 및 디지털 스레드 전략 개발 방법에 대한 인사이트를 나누고자 합니다.
- より
- それ
- 世界
- アプリ環境に合わせて
- それら
- その後
- そこ。
- ボーマン
- 彼ら
- 物事
- 考える
- この
- 考え
- 三
- 介して
- ヒント
- 〜へ
- あまりに
- ツール
- 追跡
- 伝統的な
- 旅行
- 試します
- 順番
- type
- 典型的な
- ui
- 未知
- us
- つかいます
- 中古
- ユーザー
- ユーザーインターフェース
- users
- 値
- 価値観
- 、
- ビデオ
- 動画
- 詳しく見る
- バーチャル
- ビジュアル
- vr
- 歩く
- ウォーキング
- 欲しいです
- ました
- 方法
- we
- ウェブ
- WELL
- した
- いつ
- which
- while
- より広い
- 意志
- ウィンドウズ
- 無し
- Word
- 世界
- 世界の
- 価値
- 手首
- XR
- You
- あなたの
- ゼファーネット