この「Skyrim VR」Mod は、AI が VR への没入感を次のレベルに引き上げる方法を示しています

この「Skyrim VR」Mod は、AI が VR への没入感を次のレベルに引き上げる方法を示しています

タイムスタンプ：26年2023月11日午前29時XNUMX分
この「スカイリム VR」Mod は、AI が VR の没入感を次のレベルに引き上げる方法を示しています PlatoBlockchain データ インテリジェンス。垂直検索。あい。

ChatGPT は完璧ではありませんが、人気のある AI チャットボットが大規模言語モデル (LLM) にアクセスできるということは、タムリエルのすべての NPC 住民に自然な会話を保持し、象徴的なファンタジー世界。 すごいですね、はい。 しかし、ゲームがいつの日か AI を使用して没入感の新たな高みに到達する可能性については、先見の明があります。

YouTuber 「アート・フロム・ザ・マシーン」 非常に愛されている の VR バージョンをどのように改造したかを示すビデオをリリースしました。 エルダースクロールV：スカイリム。

この mod はまだ利用できませんが、表向きは ChatGPT を介して NPC と会話を行うことができます。 xVAシンセは、ビデオゲームの音声を使用して声優の台詞を生成する AI ツールです。

以下の最新の更新で結果を確認してください。

[埋め込まれたコンテンツ]

プロジェクトの最新バージョンが導入されました Skyrimの 開発者によると、これにより音声の口パクとゲーム内イベントの NPC 認識が可能になります。 まだ少し固いですが、不気味の谷から抜け出すためのかなり大きな一歩のように感じます.

「アート・フロム・ザ・マシーン」は、このプロジェクトを次のように説明しています。 最近の Reddit の投稿 彼らの作品を展示：

数週間前、ChatGPT と xVASynth を介して Skyrim の NPC と会話できるようにする、現在取り組んでいる Python スクリプトのデモ ビデオを投稿しました。 それ以来、私はこの Python スクリプトを Skyrim 独自の modding ツールと統合する作業を続けており、いくつかのエキサイティングなマイルストーンに到達しました:

NPC は現在の位置と時刻を認識するようになりました。 これにより、ChatGPT がプレイヤーからコンテキストが与えられるのを待つのではなく、ゲームの世界に動的に反応する多くの可能性が開かれます。 例として、営業時間後にバナード マーレで店主が私と物々交換しようとする問題がなくなりました。 NPC は、会話中にプレイヤーが拾ったアイテムも認識しています。 これは、チェストを略奪したり、動物の毛皮を収穫したり、花を摘んだりすると、NPC がこれらのアクションについてコメントできるようになることを意味します。

NPC は xVASynth と口パクするようになりました。 これは明らかに、私が以前に持っていた概念実証の浮遊感のある声よりもはるかに自然です。 また、応答時間を最大 15 秒に短縮したり、会話を開始するための呪文を追加したりするなど、生活の質を改善しました。

すべてが整ったら、座ってこれらのキャラクターと VR で話すことができるのは、信じられないほど非現実的な体験です。 同じ繰り返しの声のセリフを聞くこと以上に私を経験から遠ざけるものはありません。 まだまだやるべきことがたくさんありますが、今の状態でもこれなしではプレイに戻れませんでした。

NPCに促す実際の声もかなりロボット的であることに気付くかもしれませんが、「Art from the Machine」では、スピーチからテキストへの変換を使用してChatGPT 3.5駆動のシステムと話していると言われています. 動画で聞こえる音声は、 xVAシンセ、そしてビデオ編集中にプラグインして、彼らが「無線に不向きな声」と呼んでいるものを置き換えました。

そして、いつダウンロードして自分でプレイできるようになりますか? まあ、開発者は、彼らのプロジェクトを公開することはまだ少し厄介な問題だと言います.

「これを公開する方法についてはまだ考えていないので、他の ChatGPT プロジェクトを掘り下げて、他の人が API キーの問題にどのように取り組んでいるかを確認する必要があると思います。 API 料金を払いたくない人のために、代わりにローカルで実行される LLM モデルに接続できることを願っています。」

より自然な NPC の応答を提供することも、取り組む必要がある分野だと開発者は言います。

今のところ、NPC が「考えさせてください」と言って、私が聞いて応答が生成されていることを示すように設定していますが、これはいくつかの異なるフィラーから選択するように拡張できます。毎回同じ行を繰り返す代わりに行。

ビデオはプロンプトの後に著しくスピードアップされますが、これは主に音声生成ソフトウェアによるものです。 xVAシンセこれは、ローカルで実行されているため、応答パイプラインの速度を確かに低下させます。 ChatGPT 自体はパフォーマンスに影響しない、と開発者は述べています。

チャットボットを使用してユーザー インタラクションを強化するプロジェクトはこれが初めてではありません。 長年の VR パイオニアであり開発者である Lee Vermeulen 氏 モッドボックス, 2021 年にビデオをリリースし、OpenAI GPT 3 と声優ソフトウェアを使用した最初のテストの XNUMX つを披露しました レプリカ。 Vermeulen のビデオでは、各 NPC にパラメーターを設定し、NPC が持つべき一連の知識を与える方法について語っています。

以下の Vermeulen のビデオをチェックしてください。これは、「Art from the Machine」にインスピレーションを与えて、 Skyrim VR モッド：

[埋め込まれたコンテンツ]

ご想像のとおり、これは AI 主導の NPC インタラクションの氷山の一角にすぎません。 NPC と自然に会話できることは、たとえ少し吃音で正確に人間レベルでなくても、大量の 2D テキスト メニューを通り抜けたり、遅くて見苦しいチュートリアルを実行したりするよりも望ましい場合があります。 また、信頼できる AI コンパニオンとの絆を深める機会も提供します。 スカイリム リディアか フォールアウト4の 缶詰の対話を提供する代わりに、実際には、時々あなたを助けるかもしれないニック・バレンタイン。

そして、それは実際には「Art from the Machine」のような mod が既存のゲームに提供する可能性のある表面レベルのものにすぎません。 ではありません AI主導のNPCで構築されています。 適切な質問をし、独自の探偵作業を行う能力に実際に基づいているゲームを想像してみてください。これは、VR であれ、そうでない場合であれ、これまで経験したことのないロールプレイング ゲームです。

タイムスタンプ：

より多くの VRへの道