Цей мод «Skyrim VR» показує, як штучний інтелект може вивести занурення у VR на новий рівень

Цей мод «Skyrim VR» показує, як штучний інтелект може вивести занурення у VR на новий рівень

Мітка часу: 26 квітня 2023 р., 11:29
Цей мод «Skyrim VR» показує, як штучний інтелект може підняти VR-занурення на новий рівень PlatoBlockchain Data Intelligence. Вертикальний пошук. Ai.

ChatGPT не є досконалим, але доступ популярного чат-бота зі штучним інтелектом до великих мовних моделей (LLM) означає, що він може робити багато речей, яких ви, можливо, не очікуєте, наприклад, дати всім мешканцям NPC Тамріеля можливість вести природні розмови та відповідати на запитання про культовий фантастичний світ. Неймовірно, так. Але це далекоглядний погляд на те, як ігри одного разу можуть використовувати ШІ для досягнення нових висот занурення.

YouTuber «Мистецтво з машини» опублікував відео, в якому показано, як вони модифікували улюблену VR-версію The Elder Scrolls V: Skyrim.

Мод, який ще не доступний, нібито дозволяє вам вести розмови з NPC через ChatGPT і xVASynth, інструмент штучного інтелекту для створення голосових реплік за допомогою голосів із відеоігор.

Перегляньте результати в останньому оновленні нижче:

[Вбудоване вміст]

Представлена ​​остання версія проекту Skyrim вперше створюючи сценарії, які, за словами розробника, дозволяють синхронізувати голоси та знати NPC про події в грі. Незважаючи на те, що він все ще трохи жорсткий, він виглядає досить великим кроком до виходу з дивовижної долини.

Ось як «Мистецтво з машини» описує проект у нещодавня публікація на Reddit демонструють свою роботу:

Кілька тижнів тому я опублікував відео, яке демонструє сценарій Python, над яким я працюю, який дозволяє спілкуватися з NPC у Skyrim через ChatGPT і xVASynth. Відтоді я працював над інтеграцією цього сценарію Python із власними інструментами модифікації Skyrim і досяг кількох захоплюючих віх:

Тепер NPC знають своє поточне місцезнаходження та час доби. Це відкриває для ChatGPT багато можливостей динамічно реагувати на ігровий світ, а не чекати, поки гравець надасть йому контекст. Наприклад, я більше не маю проблем із власниками магазинів, які намагаються обмінятися зі мною в Bannered Mare у неробочий час. NPC також знають про предмети, які підбирає гравець під час розмови. Це означає, що якщо ви пограбуєте скриню, збираєте шкуру тварини або збираєте квітку, NPC зможуть коментувати ці дії.

NPC тепер синхронізуються з xVASynth. Очевидно, це набагато природніше, ніж плаваючі голоси підтвердження концепції, які я мав раніше. Я також покращив якість життя, наприклад зменшив час відповіді до ~15 секунд і додав заклинання для початку розмов.

Коли все на місці, це неймовірно сюрреалістичний досвід — сісти й поговорити з цими персонажами у VR. Ніщо так не захоплює мене, як повторювані повторювані голосові репліки, і при цьому немає двох однакових відповідей. Попереду ще багато роботи, але навіть у поточному стані я не міг би повернутися до гри без цього.

Ви можете помітити, що голосові підказки NPC також досить роботизовані, хоча «Art from the Machine» каже, що вони використовують перетворення мови в текст для спілкування з системою, керованою ChatGPT 3.5. Голос, який чути у відео, створено з xVASynth, а потім підключається під час редагування відео, щоб замінити те, що вони називають своїм «радіонедружнім голосом».

А коли ви зможете завантажити та пограти собі? Що ж, розробник каже, що публікація їхнього проекту все ще є дещо складною проблемою.

«Я насправді не думав про те, як це опублікувати, тому, думаю, мені доведеться покопатися в інших проектах ChatGPT, щоб побачити, як інші вирішують проблему ключа API. Я сподіваюся, що можна альтернативно підключитися до локальної моделі LLM для тих, хто не хоче платити комісію за API».

Обслуговування більш природних відповідей NPC також є сферою, яка потребує уваги, каже розробник.

Наразі я налаштував так, що NPC говорять «дайте мені подумати», щоб вказати, що мене почули, і відповідь у процесі генерації, але ви праві, це можна розширити, щоб вибрати з кількох різних наповнювачів замість того, щоб щоразу повторювати один і той самий.

І хоча відео помітно прискорюється після підказок, це здебільшого зводиться до програмного забезпечення генерації голосу xVASynth, що, за загальним визнанням, сповільнює конвеєр відповідей, оскільки він виконується локально. Сам ChatGPT не впливає на продуктивність, каже розробник.

Це не перший проект, який ми бачимо з використанням чат-ботів для покращення взаємодії користувачів. Лі Вермюлен, давній піонер і розробник VR Modbox, у 2021 році випустив відео, в якому демонструє один із своїх перших тестів із використанням OpenAI GPT 3 і програмного забезпечення для озвучення Репліка. У відео Вермюлена він розповідає про те, як він встановлював параметри для кожного NPC, даючи їм необхідний обсяг знань, і все це визначає відповіді, які вони дадуть.

Перегляньте відео Вермюлена нижче, те саме, що надихнуло «Art from the Machine» розпочати роботу над Скайрім В.Р. мод:

[Вбудоване вміст]

Як ви можете собі уявити, це насправді лише верхівка айсберга для взаємодії NPC, керованої ШІ. Здатність природно розмовляти з NPC, навіть якщо вона трохи заїкається і не зовсім на людському рівні, може бути кращою, аніж доводиться пробиратися через тонну двовимірних текстових меню або проходити повільні та незручні підручники. Це також дає можливість більше зв’язатися з вашим надійним супутником штучного інтелекту, наприклад Skyrim's Лідія або Fallout 4 Нік Валентайн, який замість того, щоб пропонувати шаблонний діалог, міг би час від часу допомагати вам.

І це насправді лише поверхневі речі, які такий мод, як «Art from the Machine», може надати існуючим іграм, які НЕ створений за допомогою NPC, керованих штучним інтелектом. Уявіть собі гру, яка фактично базується на вашій здатності ставити правильні запитання та виконувати власну детективну роботу — ну, це рольова гра, якої ми ніколи раніше не бачили, ні у VR, ні в іншому випадку.

Часова мітка:

Більше від Дорога до ВР