Bản mod 'Skyrim VR' này cho thấy cách AI có thể đưa trải nghiệm VR lên một tầm cao mới

Bản mod 'Skyrim VR' này cho thấy cách AI có thể đưa trải nghiệm VR lên một tầm cao mới

Bản mod 'Skyrim VR' này cho thấy cách AI có thể đưa VR lên mức thông minh dữ liệu PlatoBlockchain cấp độ tiếp theo. Tìm kiếm dọc. Ái.

ChatGPT không hoàn hảo, nhưng khả năng truy cập của chatbot AI phổ biến vào các mô hình ngôn ngữ lớn (LLM) có nghĩa là nó có thể làm được nhiều điều mà bạn có thể không mong đợi, chẳng hạn như cung cấp cho tất cả cư dân NPC của Tamriel khả năng tổ chức các cuộc trò chuyện tự nhiên và trả lời các câu hỏi về thế giới tưởng tượng mang tính biểu tượng. Kỳ lạ, vâng. Nhưng đó là một cái nhìn tiên đoán về cách một ngày nào đó trò chơi có thể sử dụng AI để đạt đến tầm cao mới trong trải nghiệm nhập vai.

YouTuber 'Nghệ thuật từ máy' đã phát hành một video cho thấy cách họ sửa đổi phiên bản VR rất được yêu thích của The Elder Scrolls V: Skyrim.

Bản mod chưa có sẵn, bề ngoài cho phép bạn trò chuyện với các NPC thông qua ChatGPT và xVASynth, một công cụ AI để tạo lời thoại bằng giọng nói từ trò chơi điện tử.

Kiểm tra kết quả trong bản cập nhật gần đây nhất dưới đây:

[Nhúng nội dung]

Phiên bản mới nhất của dự án giới thiệu Skyrim viết kịch bản lần đầu tiên, mà nhà phát triển cho biết cho phép đồng bộ hóa giọng nói và nhận biết của NPC về các sự kiện trong trò chơi. Mặc dù vẫn còn hơi cứng nhắc, nhưng nó giống như một bước tiến khá lớn để leo ra khỏi thung lũng kỳ lạ.

Đây là cách 'Art from the Machine' mô tả dự án trong một bài đăng Reddit gần đây giới thiệu công việc của họ:

Một vài tuần trước, tôi đã đăng một video trình diễn tập lệnh Python mà tôi đang làm việc để cho phép bạn nói chuyện với các NPC trong Skyrim thông qua ChatGPT và xVASynth. Kể từ đó, tôi đã làm việc để tích hợp tập lệnh Python này với các công cụ sửa đổi riêng của Skyrim và tôi đã đạt được một vài cột mốc thú vị:

Các NPC hiện đã biết về vị trí và thời gian hiện tại của họ trong ngày. Điều này mở ra nhiều khả năng để ChatGPT phản ứng với thế giới trò chơi một cách linh hoạt thay vì chờ người chơi đưa ra ngữ cảnh. Ví dụ, tôi không còn gặp vấn đề với những người chủ cửa hàng cố gắng đổi chác với tôi trong Bannered Mare sau giờ làm việc. Các NPC cũng biết về các vật phẩm mà người chơi nhặt được trong khi trò chuyện. Điều này có nghĩa là nếu bạn cướp rương, thu hoạch da thú hoặc hái một bông hoa, các NPC sẽ có thể nhận xét về những hành động này.

Các NPC hiện được đồng bộ hóa môi với xVASynth. Điều này rõ ràng là tự nhiên hơn nhiều so với giọng nói bằng chứng về khái niệm trôi nổi mà tôi có trước đây. Tôi cũng đã thực hiện một số cải tiến về chất lượng cuộc sống, chẳng hạn như giảm thời gian phản hồi xuống ~15 giây và thêm câu thần chú để bắt đầu cuộc trò chuyện.

Khi mọi thứ đã sẵn sàng, đó là một trải nghiệm cực kỳ siêu thực khi có thể ngồi xuống và nói chuyện với những nhân vật này trong VR. Không có gì khiến tôi mất trải nghiệm hơn là nghe thấy những câu thoại lặp đi lặp lại giống nhau và với điều này, không có hai phản hồi nào giống nhau. Vẫn còn rất nhiều việc phải làm, nhưng ngay cả trong tình trạng hiện tại, tôi không thể quay lại chơi mà không có thứ này.

Bạn có thể nhận thấy giọng nói thực sự nhắc nhở các NPC cũng khá rô bốt, mặc dù 'Art from the Machine' cho biết họ đang sử dụng tính năng chuyển giọng nói thành văn bản để nói chuyện với hệ thống điều khiển ChatGPT 3.5. Giọng nói nghe thấy trong video được tạo ra từ xVASynth, rồi cắm vào trong khi chỉnh sửa video để thay thế thứ mà họ gọi là “giọng nói không thân thiện với đài phát thanh”.

Và khi nào bạn có thể tải xuống và chơi cho chính mình? Chà, nhà phát triển nói rằng việc xuất bản dự án của họ vẫn còn là một vấn đề nan giải.

“Tôi chưa thực sự nghĩ về cách xuất bản điều này, vì vậy tôi nghĩ mình sẽ phải tìm hiểu kỹ các dự án ChatGPT khác để xem những người khác đã giải quyết vấn đề về khóa API như thế nào. Tôi hy vọng rằng có thể kết nối thay thế với mô hình LLM do địa phương điều hành cho bất kỳ ai không muốn trả phí API.”

Nhà phát triển cho biết việc phục vụ các phản hồi NPC tự nhiên hơn cũng là một lĩnh vực cần được giải quyết.

Hiện tại, tôi đã thiết lập nó để các NPC nói “hãy để tôi nghĩ” để cho biết rằng tôi đã được lắng nghe và phản hồi đang trong quá trình tạo, nhưng bạn nói đúng, điều này có thể được mở rộng để chọn từ một số phụ khác dòng thay vì lặp lại cùng một dòng mỗi lần.

Và mặc dù video được tăng tốc đáng kể sau lời nhắc, nhưng điều này chủ yếu là do phần mềm tạo giọng nói xVASynth, điều này phải thừa nhận là làm chậm quá trình phản hồi vì nó đang được chạy cục bộ. Nhà phát triển cho biết bản thân ChatGPT không ảnh hưởng đến hiệu suất.

Đây không phải là dự án đầu tiên chúng tôi thấy sử dụng chatbot để làm phong phú thêm các tương tác của người dùng. Lee Vermeulen, nhà tiên phong và nhà phát triển VR lâu năm đứng sau Hộp điều chếđã phát hành một video vào năm 2021 thể hiện một trong những thử nghiệm đầu tiên của anh ấy bằng OpenAI GPT 3 và phần mềm diễn xuất bằng giọng nói Bản sao. Trong video của Vermeulen, anh ấy nói về cách anh ấy đặt tham số cho từng NPC, cung cấp cho họ kiến ​​thức cơ bản mà họ nên có, tất cả đều hướng dẫn loại phản hồi mà họ sẽ đưa ra.

Hãy xem video của Vermeulen bên dưới, chính video này đã truyền cảm hứng cho 'Art from the Machine' bắt đầu làm việc trên Skyrim VR chế độ:

[Nhúng nội dung]

Như bạn có thể tưởng tượng, đây thực sự chỉ là phần nổi của tảng băng chìm đối với các tương tác với NPC do AI điều khiển. Có thể nói chuyện tự nhiên với các NPC, ngay cả khi hơi nói lắp và không chính xác ở cấp độ con người, có thể tốt hơn là phải lướt qua hàng tấn menu văn bản 2D hoặc trải qua các hướng dẫn chậm chạp và vô duyên. Nó cũng mang đến cơ hội gắn kết nhiều hơn với người bạn đồng hành AI đáng tin cậy của bạn, như Skyrim Lydia hoặc Fallout 4 của Nick Valentine, người thay vì đưa ra những cuộc đối thoại đóng hộp, bạn biết đấy, thỉnh thoảng có thể giúp bạn giải quyết vấn đề.

Và đó thực sự chỉ là những thứ ở cấp độ bề mặt mà một bản mod như 'Art from the Machine' có thể cung cấp cho các trò chơi hiện có không phải được xây dựng với các NPC do AI điều khiển. Tưởng tượng một trò chơi thực sự dựa trên khả năng đặt câu hỏi phù hợp của bạn và thực hiện công việc thám tử của riêng bạn—à, đó là một trò chơi nhập vai mà chúng tôi chưa từng trải nghiệm trước đây, kể cả trong VR của chúng tôi.

Dấu thời gian:

Thêm từ Đường đến VR