Ten mod „Skyrim VR” pokazuje, jak sztuczna inteligencja może przenieść zanurzenie się w rzeczywistości wirtualnej na wyższy poziom

Opublikowane ponownie przez Plato

Obserwuje: 0

Ten mod „Skyrim VR” pokazuje, jak sztuczna inteligencja może przenieść zanurzenie się w rzeczywistości wirtualnej na wyższy poziom inteligencji danych PlatoBlockchain. Wyszukiwanie pionowe. AI.

ChatGPT nie jest doskonały, ale dostęp popularnego chatbota AI do dużych modeli językowych (LLM) oznacza, że może robić wiele rzeczy, których możesz się nie spodziewać, na przykład dać wszystkim mieszkańcom Tamriel NPC możliwość prowadzenia naturalnych rozmów i odpowiadania na pytania dotyczące ikoniczny świat fantasy. Niesamowite, tak. Ale to prorocze spojrzenie na to, jak pewnego dnia gry mogą wykorzystać sztuczną inteligencję, aby osiągnąć nowe wyżyny zanurzenia.

YouTuber „Sztuka z maszyny” opublikowało wideo pokazujące, w jaki sposób zmodyfikowali ukochaną wersję VR The Elder Scrolls V: Skyrim.

Mod, który nie jest jeszcze dostępny, rzekomo pozwala prowadzić rozmowy z NPC za pośrednictwem ChatGPT i xVASynth, narzędzie AI do generowania kwestii głosowych przy użyciu głosów z gier wideo.

Sprawdź wyniki w najnowszej aktualizacji poniżej:

[Osadzone treści]

Najnowsza wersja projektu wprowadza Skyrim po raz pierwszy tworzenie skryptów, które według dewelopera pozwalają na synchronizację głosów i świadomość NPC o wydarzeniach w grze. Choć wciąż trochę sztywny, wydaje się, że jest to całkiem duży krok w kierunku wyjścia z niesamowitej doliny.

Oto jak „Art from the Machine” opisuje projekt w niedawny wpis z Reddita prezentując swoje prace:

Kilka tygodni temu opublikowałem film demonstrujący skrypt Pythona, nad którym pracuję, który pozwala rozmawiać z NPC w Skyrim przez ChatGPT i xVASynth. Od tego czasu pracowałem nad integracją tego skryptu w Pythonie z własnymi narzędziami do modowania Skyrim i osiągnąłem kilka ekscytujących kamieni milowych:

NPC są teraz świadomi swojej aktualnej lokalizacji i pory dnia. Otwiera to wiele możliwości dla ChatGPT, aby dynamicznie reagować na świat gry, zamiast czekać na kontekst od gracza. Na przykład nie mam już problemów ze sklepikarzami próbującymi handlować ze mną w Chorągwiowej Klaczy po godzinach pracy. NPC są również świadomi przedmiotów podnoszonych przez gracza podczas rozmowy. Oznacza to, że jeśli splądrujesz skrzynię, zbierzesz skórę zwierzęcia lub zerwiesz kwiat, NPC będą mogli komentować te działania.

NPC są teraz zsynchronizowani z ustami za pomocą xVASynth. Jest to oczywiście o wiele bardziej naturalne niż płynne głosy weryfikujące koncepcję, które miałem wcześniej. Wprowadziłem również pewne ulepszenia jakości życia, takie jak skrócenie czasu odpowiedzi do ~15 sekund i dodanie zaklęcia rozpoczynającego rozmowę.

Kiedy wszystko jest na swoim miejscu, to niesamowicie surrealistyczne przeżycie móc usiąść i porozmawiać z tymi postaciami w VR. Nic nie odrywa mnie od tego doświadczenia bardziej niż słuchanie tych samych powtarzających się linii głosowych, a przy tym nie ma dwóch takich samych odpowiedzi. Jeszcze dużo pracy przede mną, ale nawet w obecnym stanie nie mogłem bez tego wrócić do grania.

Możesz zauważyć, że rzeczywisty głos podpowiadający NPC jest również dość robotyczny, chociaż „Art from the Machine” mówi, że używają mowy na tekst, aby rozmawiać z systemem opartym na ChatGPT 3.5. Głos słyszany w filmie jest generowany z xVASynth, a następnie podłączony podczas edycji wideo, aby zastąpić to, co nazywają swoim „nieprzyjaznym radiu głosem”.

A kiedy można pobrać i grać dla siebie? Cóż, deweloper mówi, że opublikowanie ich projektu jest nadal trochę lepkim problemem.

„Naprawdę nie myślałem o tym, jak to opublikować, więc myślę, że będę musiał zagłębić się w inne projekty ChatGPT, aby zobaczyć, jak inni poradzili sobie z problemem klucza API. Mam nadzieję, że możliwe jest alternatywne połączenie z lokalnie prowadzonym modelem LLM dla każdego, kto nie chce płacić opłat API”.

Deweloper mówi, że serwowanie bardziej naturalnych odpowiedzi NPC jest również obszarem, którym należy się zająć.

Na razie ustawiłem to tak, że NPC mówią „pozwól mi pomyśleć”, aby wskazać, że zostałem wysłuchany i odpowiedź jest w trakcie generowania, ale masz rację, można to rozszerzyć, aby wybrać spośród kilku różnych wypełniaczy linie zamiast powtarzać to samo za każdym razem.

I chociaż wideo jest zauważalnie przyspieszone po monitach, sprowadza się to głównie do oprogramowania do generowania głosu xVASynth, co wprawdzie spowalnia potok odpowiedzi, ponieważ jest uruchamiany lokalnie. Sam ChatGPT nie wpływa na wydajność, mówi deweloper.

To nie pierwszy projekt, w którym widzieliśmy wykorzystanie chatbotów do wzbogacenia interakcji użytkowników. Lee Vermeulen, długoletni pionier i programista VR Modbox, opublikował film w 2021 roku przedstawiający jeden ze swoich pierwszych testów z użyciem OpenAI GPT 3 i oprogramowania do obsługi głosowej Replika. W filmie Vermeulen mówi o tym, jak ustawiał parametry dla każdego NPC, przekazując im wiedzę, którą powinni posiadać, a wszystko to kieruje rodzajami odpowiedzi, których udzielą.

Obejrzyj poniższy film Vermeulena, ten sam, który zainspirował „Art from the Machine” do rozpoczęcia pracy nad Skyrim VR tryb:

[Osadzone treści]

Jak można sobie wyobrazić, to naprawdę tylko wierzchołek góry lodowej dla interakcji NPC sterowanych przez sztuczną inteligencję. Możliwość naturalnej rozmowy z NPC, nawet jeśli jest trochę jąkająca się i niezupełnie na poziomie człowieka, może być lepsza niż konieczność przedzierania się przez mnóstwo dwuwymiarowych menu tekstowych lub przechodzenia przez powolne i niezgrabne samouczki. Daje to również szansę na nawiązanie większej więzi ze swoim zaufanym towarzyszem AI, takim jak Skyrim's Lidia lub Fallout 4 użytkownika Nicka Valentine'a, który zamiast oferować dialogi w puszkach, może właściwie od czasu do czasu ci pomóc.

I to naprawdę tylko powierzchowne rzeczy, które mod taki jak „Art from the Machine” może dostarczyć do istniejących gier nie są zbudowany z postaci NPC sterowanych przez sztuczną inteligencję. Wyobrażanie sobie gry, która opiera się na umiejętności zadawania właściwych pytań i wykonywania własnej pracy detektywistycznej — cóż, to gra fabularna, jakiej nigdy wcześniej nie doświadczyliśmy, ani w VR, ani w inny sposób.