ChatGPT Finds A Role Playing Dungeons & Dragons

Ponovno objavil Platon

Spremljevalci: 0

Boffini so našli vlogo za klepetalne robote z umetno inteligenco, kjer običajne halucinacije niso nujno težava.

The eggheads – s sedežem na Univerzi v Pensilvaniji in Univerzi v Marylandu v ZDA – so uporabili velike jezikovne modele OpenAI (LLM) za pomoč pri domišljijskem igranju vlog, zlasti Dungeons & Dragons (D&D).

V papir za predhodni tisk z naslovom “CALYPSO: LLM kot pomočniki gospodarjev ječ,” Andrew Zhu, doktorski študent UPenn; Lara Martin, docentka na UMD; Andrew Head, docent na UPenn; in Chris Callison-Burch, izredni profesor na univerzi UPenn, razložita, kako so uporabili študije LLM za izboljšanje igre, ki je močno odvisna od človeške interakcije.

D&D se je prvič pojavil leta 1974 kot igra igranja vlog (RPG), v kateri so igralci prevzeli vloge pustolovskih srednjeveških junakov in odigrali te osebnosti v okviru zgodbe, ki jo je vodil dungeon master (DM) ali game master (GM). Predpogoji so bili niz pravil – ki jih je takrat objavil Tactical Studies Rules – poliedrske kocke, svinčnik, papir in skupna zavezanost interaktivnemu pripovedovanju zgodb in skromnemu gledališču. Predpostaviti je treba prigrizke, ki so tehnično neobvezni.

Poleg takšnega namiznega igranja vlog je širjenje osebnih računalnikov v osemdesetih letih prejšnjega stoletja pripeljalo do različnih računalniških različic, tako v smislu računalniško podprte igre kot povsem elektronskih simulacij – kot je nedavno izdana Baldurjeva vrata 3, če omenimo le enega od stotin naslovov, ki so jih navdihnili D&D in druge RPG.

Akademski igralci računalniških iger iz UPenn in UMD so se odločili ugotoviti, kako bi lahko LLM podpirali človeške DM, ki so odgovorni za postavitev prizorišča, kjer se odvija skupaj izmišljena pustolovščina, za metanje kock, ki določajo rezultate določenih dejanj, za uveljavljanje pravil ( ki so postale precej obsežne), in za splošno zagotavljanje, da je izkušnja zabavna in zabavna.

Da bi to naredili, so ustvarili nabor treh vmesnikov, ki jih poganja LLM, imenovan CALYPSO – kar pomeni Collaborative Assistant for Lore in Yielding Plot Synthesis Objectives. Zasnovan je za igranje D&D na spletu prek Discorda, priljubljene storitve za klepet.

"Ko so imeli dostop do CALYPSO, so DM-ji poročali, da je ustvaril besedilo visoke ločljivosti, primerno za neposredno predstavitev igralcem, in ideje nizke ločljivosti, ki bi jih lahko DM razvijal naprej, hkrati pa ohranil svojo kreativno agencijo," pojasnjuje časopis. "CALYPSO vidimo kot ponazoritev paradigme orodij, razširjenih z umetno inteligenco, ki zagotavljajo sinhrono kreativno pomoč znotraj uveljavljenih svetov iger in širše namiznega igranja iger."

Pandemija COVID-19 je nekaj osebnega, namiznega igranja iger premaknila na splet, ugotavljajo raziskovalci v svojem prispevku, in mnogi igralci, ki igrajo prek Discorda, to počnejo z Avrae – bot Discord, ki ga je zasnoval Andrew Zhu, doktorski študent UPenn in soavtor prispevka CALYPSO.

»Osnovne zamisli v članku (da so LLM-ji sposobni delovati kot so-DM na načine, ki pomagajo navdihniti človeško DM, ne da bi prevzeli ustvarjalni nadzor nad igro) veljajo za D&D in druge namizne igre ne glede na način. Toda še vedno je nekaj izzivov, ki jih je treba premagati, preden tehnologijo uporabimo za osebno igranje iger,« je dejal Zhu v elektronskem sporočilu naslovu Register.

Zhu in njegovi kolegi so se iz več razlogov osredotočili na igranje iger Discord play-by-post (PBP). Prvič, »PBP, ki temelji na Discordu, že temelji na besedilu, zato nam ni treba porabiti časa za prepis govora v besedilo za LLM,« je pojasnil.

Spletna nastavitev prav tako omogoča DM-ju, da si zasebno ogleda izhod, ustvarjen z LLM-jem (kjer so "zamisli z nizko zvestobo" manj pomembne) in osvobodi DM-ja, da mu ni treba tipkati ali narekovati v nek vmesnik.

KALIPSO, a Discord bot z izvorno kodo, je v dokumentu opisano, da ima tri vmesnike: enega za generiranje nastavitvenega besedila, ki opisuje srečanje (GPT-3); eno za osredotočeno viharjenje možganov, v katerem lahko DM vpraša LLM za vprašanja o srečanju ali izboljšanju povzetka srečanja (ChatGPT); in enega za klepet z odprto domeno, v katerem lahko igralci sodelujejo neposredno s ChatGPT, ki deluje kot domišljijsko bitje, ki pozna D&D.

Slika rezultata bota CALYPSO (kliknite za povečavo)

Nastavitev teh vmesnikov je vključevala sejanje LLM s posebnimi pozivi (podrobno v prispevku), ki pojasnjujejo, kako naj se chatbot odzove v vsaki vlogi vmesnika. Za vključitev delovanja D&D ni bilo potrebno posebno usposabljanje za model.

»Ugotovili smo, da tudi brez usposabljanja serija modelov GPT ve veliko o D&D, saj je v svojih podatkih o usposabljanju videla izvorne knjige in internetne razprave,« je dejal Zhu.

Ugotovili smo, da tudi brez usposabljanja serija modelov GPT ve veliko o D&D iz ogledov izvornih knjig in internetnih razprav.

Zhu in njegovi kolegi so testirali CALYPSO z 71 igralci in DM-ji, nato pa so jih anketirali o izkušnjah. Ugotovili so, da je AI pomočnik bolj uporaben kot ne.

Vendar je bil prostor za izboljšave. Na primer, v enem srečanju je CALYPSO preprosto parafraziral informacije v pozivu za nastavitve in statistiko, za katere so DM menili, da nimajo dodane vrednosti.

Register Zhuja vprašal, ali je nagnjenost LLM-jev k »halucinacijam« – izmišljevanju – problem za udeležence študije.

»V kreativnem kontekstu postane malo manj smiselno – na primer, referenčne knjige D&D ne vsebujejo vseh podrobnosti o vsaki pošasti, tako da, če LLM trdi, da ima določena pošast dlako določene barve, ali se to šteje kot halucinacija ?" je rekel Zhu.

»Če neposredno odgovorim na vprašanje, da; model si pogosto 'izmišljuje' dejstva o pošastih, ki jih ni v izvornih knjigah. Večina teh je nepomembnih stvari, ki dejansko pomagajo DM, na primer, kako zveni klic pošasti ali oblika šarenice pošasti ali podobne stvari. Včasih, manj pogosto, halucinira bolj drastična dejstva, na primer, češ da imajo ledeni salamandri krila (nimajo jih).«

Druga težava, ki se je pojavila, je bila, da so zaščitni ukrepi pri usposabljanju modelov včasih ovirali CALYPSO-jevo sposobnost razpravljanja o vprašanjih, ki bi bila primerna v igri D&D – kot sta dirka in igranje.

"Na primer, model bi včasih zavrnil predlaganje (fantastičnih) ras, verjetno zaradi prizadevanj za zmanjšanje možnosti za rasno pristranskost v resničnem svetu," ugotavlja časopis. "V drugem primeru model vztraja, da ni sposoben igrati D&D, verjetno zaradi prizadevanj, da bi model preprečil, da bi trdil o sposobnostih, ki jih nima."

(Da, prepričani smo, da so nekateri od nas že bili tam in zanikajo kakršno koli poznavanje iger vlog kljub dolgoletnim igranjem.)

Zhu je dejal, da je jasno, da ljudje ne želijo DM AI, vendar so bolj pripravljeni dovoliti DM, da se zanesejo na pomoč AI.

»Med našimi formativnimi študijami je bila pogosta tema, da ljudje ne želijo avtonomnega AI DM iz nekaj razlogov,« je pojasnil. »Prvič, veliko igralcev, ki smo jih intervjuvali, je že igralo z orodji, kot je AI Dungeon, in so poznali slabosti AI pri pripovedovanju zgodb z dolgim kontekstom. Drugič, kar je še pomembneje, izrazili so, da bi avtonomni AI DM odvzel duh igre; ker je D&D v bistvu ustvarjalna igra pripovedovanja zgodb, bi se zdelo napačno, če bi AI ustvaril to zgodbo.

»To, da je bil CALYPSO neobvezna stvar, ki so jo DM-ji lahko uporabili toliko ali tako malo, kot so želeli, je pomagalo ohraniti ustvarjalno žogico v igrišču človeških DM-jev; pogosto bi se zgodilo, da bi CALYPSO DM ravno toliko spodbudil, da bi jih rešil iz pisateljske blokade, ali pa jim dal seznam idej, na katerih naj gradijo. Ko je človeški DM začutil, da želi več nadzora nad prizorom, je lahko preprosto nadaljeval z DM v svojem slogu, ne da bi sploh uporabil CALYPSO.« ®