Mod 'Skyrim VR' Ini Menunjukkan Bagaimana AI Dapat Membawa Perendaman VR ke Tingkat Selanjutnya

Mod 'Skyrim VR' Ini Menunjukkan Bagaimana AI Dapat Membawa Perendaman VR ke Tingkat Selanjutnya

Stempel Waktu: 26 April 2023 11:29
Mod 'Skyrim VR' Ini Menunjukkan Bagaimana AI Dapat Membawa Perendaman VR ke Tingkat Berikutnya Kecerdasan Data PlatoBlockchain. Pencarian Vertikal. Ai.

ChatGPT tidak sempurna, tetapi akses chatbot AI yang populer ke model bahasa besar (LLM) berarti ia dapat melakukan banyak hal yang mungkin tidak Anda harapkan, seperti memberi semua penghuni NPC Tamriel kemampuan untuk melakukan percakapan alami dan menjawab pertanyaan tentang dunia fantasi ikonik. Luar biasa, ya. Tapi ini adalah pandangan awal tentang bagaimana game suatu hari nanti dapat menggunakan AI untuk mencapai ketinggian baru dalam pencelupan.

YouTuber 'Seni dari Mesin' merilis video yang memamerkan bagaimana mereka memodifikasi versi VR yang sangat disukai The Elder Scrolls V: Skyrim.

Mod, yang belum tersedia, seolah-olah memungkinkan Anda melakukan percakapan dengan NPC melalui ChatGPT dan xVASynth, alat AI untuk menghasilkan garis akting suara menggunakan suara dari video game.

Lihat hasilnya di pembaruan terbaru di bawah ini:

[Embedded content]

Versi terbaru dari proyek ini diperkenalkan Skyrim pembuatan skrip untuk pertama kalinya, yang menurut pengembang memungkinkan sinkronisasi suara bibir dan kesadaran NPC tentang peristiwa dalam game. Meski masih agak kaku, rasanya seperti langkah yang cukup besar untuk mendaki keluar dari lembah yang luar biasa.

Beginilah 'Seni dari Mesin' menggambarkan proyek di posting Reddit baru-baru ini memamerkan karya mereka:

Beberapa minggu yang lalu saya memposting video yang mendemonstrasikan skrip Python yang sedang saya kerjakan yang memungkinkan Anda berbicara dengan NPC di Skyrim melalui ChatGPT dan xVASynth. Sejak itu saya telah bekerja untuk mengintegrasikan skrip Python ini dengan alat modding Skyrim sendiri dan saya telah mencapai beberapa pencapaian yang menarik:

NPC sekarang mengetahui lokasi dan waktu mereka saat ini. Ini membuka banyak kemungkinan bagi ChatGPT untuk bereaksi terhadap dunia game secara dinamis alih-alih menunggu untuk diberi konteks oleh pemain. Sebagai contoh, saya tidak lagi bermasalah dengan pemilik toko yang mencoba melakukan barter dengan saya di Bannered Mare setelah jam kerja. NPC juga mengetahui item yang diambil oleh pemain selama percakapan. Artinya, jika Anda menjarah peti, memanen kulit binatang, atau memetik bunga, NPC akan dapat mengomentari tindakan tersebut.

NPC sekarang disinkronkan bibir dengan xVASynth. Ini jelas jauh lebih alami daripada suara proof-of-concept ringan yang saya miliki sebelumnya. Saya juga telah membuat beberapa peningkatan kualitas hidup seperti menurunkan waktu respons hingga ~15 detik dan menambahkan mantra untuk memulai percakapan.

Ketika semuanya sudah siap, merupakan pengalaman yang sangat nyata untuk dapat duduk dan berbicara dengan karakter-karakter ini di VR. Tidak ada yang membawa saya keluar dari pengalaman lebih dari mendengar garis suara berulang yang sama, dan dengan ini tidak ada dua tanggapan yang sama. Masih banyak pekerjaan yang harus dilakukan, tetapi bahkan dalam kondisi saat ini saya tidak dapat kembali bermain tanpa ini.

Anda mungkin memperhatikan suara sebenarnya yang mendorong NPC juga cukup robot, meskipun 'Art from the Machine' mengatakan mereka menggunakan ucapan-ke-teks untuk berbicara dengan sistem yang digerakkan oleh ChatGPT 3.5. Suara yang terdengar dalam video dihasilkan dari xVASynth, dan kemudian dicolokkan selama pengeditan video untuk menggantikan apa yang mereka sebut "suara tidak ramah radio".

Dan kapan Anda bisa mengunduh dan memainkannya sendiri? Yah, pengembang mengatakan menerbitkan proyek mereka masih merupakan masalah yang sulit.

“Saya belum benar-benar memikirkan cara menerbitkannya, jadi saya pikir saya harus menggali proyek ChatGPT lain untuk melihat bagaimana orang lain menangani masalah kunci API. Saya berharap mungkin untuk terhubung ke model LLM yang dijalankan secara lokal bagi siapa saja yang tidak tertarik untuk membayar biaya API.”

Melayani respons NPC yang lebih alami juga merupakan area yang perlu ditangani, kata pengembang.

Untuk saat ini saya telah menyiapkannya sehingga NPC mengatakan "biarkan saya berpikir" untuk menunjukkan bahwa saya telah didengar dan tanggapan sedang dalam proses pembuatan, tetapi Anda benar, ini dapat diperluas untuk memilih dari beberapa pengisi yang berbeda garis alih-alih mengulangi yang sama setiap saat.

Dan sementara video terasa dipercepat setelah diminta, ini sebagian besar disebabkan oleh perangkat lunak penghasil suara xVASynth, yang memang memperlambat jalur respons karena dijalankan secara lokal. ChatGPT sendiri tidak memengaruhi kinerja, kata pengembang.

Ini bukan proyek pertama yang kami lihat menggunakan chatbots untuk memperkaya interaksi pengguna. Lee Vermeulen, perintis dan pengembang VR lama di belakang kotak mod, merilis video pada tahun 2021 yang memamerkan salah satu pengujian pertamanya menggunakan OpenAI GPT 3 dan perangkat lunak pengisi suara Replika. Dalam video Vermeulen, dia berbicara tentang bagaimana dia menetapkan parameter untuk setiap NPC, memberi mereka pengetahuan yang harus mereka miliki, yang semuanya memandu jenis tanggapan yang akan mereka berikan.

Lihat video Vermeulen di bawah ini, video yang sama yang menginspirasi 'Art from the Machine' untuk mulai mengerjakannya Skyrim VR modus:

[Embedded content]

Seperti yang Anda bayangkan, ini hanyalah puncak gunung es untuk interaksi NPC yang digerakkan oleh AI. Mampu berbicara secara alami dengan NPC, bahkan jika sedikit gagap dan tidak persis pada tingkat manusia, mungkin lebih baik daripada harus mengarungi banyak menu teks 2D, atau melalui tutorial yang lambat dan canggung. Ini juga menawarkan kesempatan untuk lebih terikat dengan pendamping AI tepercaya Anda, seperti Skyrim's Lydia atau Fallout 4's Nick Valentine, yang alih-alih menawarkan dialog kalengan mungkin sebenarnya, Anda tahu, membantu Anda sesekali.

Dan itu benar-benar hanya hal-hal tingkat permukaan yang mungkin diberikan oleh mod seperti 'Seni dari Mesin' ke game yang ada tidak dibangun dengan NPC yang digerakkan oleh AI. Membayangkan sebuah game yang sebenarnya didasarkan pada kemampuan Anda untuk mengajukan pertanyaan yang tepat dan melakukan pekerjaan detektif Anda sendiri—nah, itu adalah role-playing game yang belum pernah kami alami sebelumnya, baik di VR maupun sebaliknya.

Stempel Waktu:

Lebih dari Jalan menuju VR