Als het gaat om handtrackingspellen op Quest, komt niets echt in de buurt van Unplugged.
Unplugged, ontwikkeld door Anotherway en eind 2021 gepubliceerd door Vertigo Games, is een luchtgitaarspel, geรฏnspireerd door Guitar Hero en vele anderen, waarmee je in VR kunt versnipperen met een virtuele gitaar en je echte handen.
Zoals ik elders heb gezegd, Unplugged maakt gebruik van de handtrackingtechnologie van Quest om de denkbeeldige handeling van luchtgitaar tot leven te brengen. Daarbij brengt het handtracking naar een geheel nieuw conceptueel en technologisch niveau, en overtreft al het andere dat beschikbaar is op Quest.
"Vanaf het allereerste begin was het onze obsessie om te begrijpen hoe de technologie beperkt is en te proberen die dingen op te poetsen", zegt studiodirecteur en maker van Unplugged, Ricardo Acosta. โDat was het allereerste. Niet de graphics, zelfs niet de gameplay.โ
Na een gesprek met Acosta in onze virtuele studio (volledig video-interview hierboven ingesloten), is het duidelijk dat het creรซren van een gepolijste en tastbare ervaring altijd het doel was. "Ik denk dat handtracking hier voorgoed is", vertelt hij me. โIk wilde iets creรซren dat echt werkte. Het was niet zomaar weer een demo.โ
Zo'n sterke toewijding aan deze nieuwe vorm van input is een grote oproep, vooral voor Acosta, die jaren als hands-trace-scepticus werkte tijdens het werken aan het HoloLens-team bij Microsoft. "Toen ik bij Microsoft werkte, was ik een voorstander van controllers", zegt hij lachend. "Bij Microsoft draait alles om het volgen van de hand, maar ik had zoiets van: 'Nee jongens, we hebben controllers nodig. Controllers zijn geweldig.' En nu zeg ik precies het tegenovergestelde.โ
"Op de eerste versie van de HoloLens ... heb je handtracking, maar net als de blob. Het is alleen de hand, niet de vingers.โ Zonder volledige en betrouwbare vingertracking kwam Acosta teleurgesteld en sceptisch weg. "Met de HoloLens 2 was het een beetje beter, maar de vertraging tussen je beweging en de hand was erg groot, om veel technische redenen."
Toch werd Unplugged voor het eerst geconceptualiseerd in 2015 - ruim voor de komst van moderne VR-handtrackingfunctionaliteit. "Ik herinner me dat ik bij een concert in Praag was en ik deed alsof ik luchtgitaar deed", herinnert hij zich. "En op een gegeven moment dacht ik, oh, dit is een interactie die zou kunnen werken in VR."
โZodra ik terug naar huis ging, maakte ik een prototype van iets โฆ en het werkte helemaal. Het was alsof, oh, dit is goed. Dit is iets waar we een spel van kunnen maken." Het oorspronkelijke idee ontwikkelde zich tot iets dat lijkt op Rock Band, maar dan voor VR, met behulp van controllers en de eerste Vive-headsets en Oculus SDK's. Acosta zei dat hij zijn baan bij Microsoft opzegde om in de loop van vier maanden aan het prototype, getiteld Rock the Stage, te werken.
"Ik denk dat het best goed was", zegt hij over het Rock the Stage-prototype, waarvan video's bestaan โโnog steeds online. "Het beste was dat je het gevoel kreeg dat je erbij was." Maar Acosta liep al snel tegen een verkeersdrempel aan - muziekgames, en vooral de bijbehorende licenties, zijn ingewikkeld werk. โJe hebt veel geld nodig. Je hebt een team van mensen nodig dat al die muzieklicenties afhandelt. En dat had ik vroeger niet allemaal. Dus besloot ik op een gegeven moment terug te gaan naar mijn werk.โ
Na nog een paar jaar in de VR/AR-divisie van Microsoft te hebben gewerkt, herzag Acosta het concept in 2020 terwijl hij zich tijdens de pandemie thuis verveelde. "Oculus [had] zojuist het handvolgsysteem [voor Quest] uitgebracht en plotseling kwam het bij me op: 'Oh mijn god, ik zou dat prototype kunnen redden en proberen [te kijken] of het werkt met handtracking.'"
Zelfs in de vroege stadia voelde handtracking als een keerpunt voor de voorheen alleen controller-ervaring. โHet werkte zo goed. . .Vroeger was met de controllers leuk, maar met handtracking was precies wat het zou moeten zijn.โ Acosta paste zijn originele prototype aan tot iets nieuws, waarbij hij de controllers liet vallen voor iets dat veel vrijer en meeslepender was. โToen ik [handtracking] op het prototype plaatste, was het niet perfect, maar het was goed genoeg voor mij om de ervaring op te poetsen. Ik wist dat ik het met een beetje werk en een paar algoritmen bovenop de handtracking zou kunnen laten werken.
Acosta heeft een video gemaakt waarin het nieuwe prototypespel wordt getoond en op sociale media is geplaatst. Het explodeerde al snel en trok veel belangstelling, vooral van uitgevers die financiering aanboden. Na besprekingen met een paar verschillende uitgevers, tekende Acosta bij Vertigo Games. โZe boden de beste deal. En ze waren ook groter, en ze hadden echt een super mooie visie over wat het spel zou moeten zijn.โ
โIn het begin was ik er een beetje bang voor, omdat het een supergroot project was. We hadden geen bedrijf samen. Het was ingewikkeld.โ Wat begon als een eenmansshow moest uitgroeien tot een ontluikend team. Acosta's vrouw trad toe als projectmanager en ze werden toen vergezeld door een paar anderen om de kleine studio te vormen die nu bekend staat als Anotherway.
"We zijn nu met zes mensen, wat niet veel is", zegt hij. โHeel recent kregen we de kans om een โโklein beetje te groeien, maar we besloten klein te blijven. Ik werk het grootste deel van mijn carriรจre bij Microsoft. Dat is een heel groot bedrijf en het is geweldig, maar ik werk graag met een heel klein aantal mensen. Het is een heel creatieve omgeving.โ
Samen met Vertigo ontwikkelde Unplugged zich al snel tot een project met grotere ambities dan Acosta ooit had gedacht. "Ik ben erg conservatief wat betreft het toevoegen van functies, omdat ik weet dat alles wat je aan een project toevoegt, veel problemen, veel bugs, veel dingen zal veroorzaken."
โZe drongen aan op meer personeel. Ze wilden meer muziek, ze wilden meer locaties, ze wilden meer kwaliteit in het spel en ze hebben daar altijd op aangedrongen. En ik denk dat de game over het algemeen veel kleiner zou zijn geweest zonder Vertigo", zegt hij.
Vooral de samenwerking met Vertigo opende kansen als het ging om de voorgestelde tracklist. โIn het begin gingen we gewoon voor kleine bands. En toen we ons bij Vertigo aanmeldden, zeiden ze: 'Nee, zoals indiebands cool zijn en we zullen er een paar hebben. Maar we hebben beroemde bands nodig.' En we hadden zoiets van, oh, maar dat wordt super ingewikkeld.โ
Vertigo stuurde Anotherway een Spotify-afspeellijst en vroeg hen om nummers toe te voegen die ze misschien in de game wilden hebben. "En we hadden zoiets van 'Wacht, welke muziek dan ook?'" Het was een grote mentale verschuiving.
The Offspring's The Kids Are not Alright was het eerste grote nummer waar Vertigo en Anotherway de rechten op kregen. "We waren net aan het springen, zoals, 'Oh mijn god, we hebben het gehaald.'" De de uiteindelijke selectie omvatte een aantal enorme artiesten - The Clash, T. Rex, Weezer en Steel Panther, om er maar een paar te noemen. โ[Muzieklicenties] is een zeer tijdrovend proces, en dat wist ik. Dus zelfs in mijn wildste dromen zou ik niet hebben gedroomd over het hebben van Weezer of Tenacious D, The Offspring of Ozzyโฆโ
De opname van Roadie van Tenacious D is bijzonder speciaal voor Acosta - niet alleen is de band een van zijn favorieten, maar hij had het nummer al in 2015 gebruikt in het allereerste prototype. Het nummer haalde het echter bijna niet in de laatste game.
Vertigo en Anotherway hadden aanvankelijk moeite om contact te maken met Tenacious D om de rechten veilig te stellen. Vertigo had echter een truc in petto: Guitar Hero-legende Mark Henderson was aan boord gehaald om te helpen met het spel. "Hij zei: 'Jongens, laat het aan mij over. Ik zal ervoor zorgen dat het gebeurt.' Dus op de een of andere manier nam hij contact op met de manager van Tenacious D en begon met hen te praten."
Met de hulp van Henderson werden de rechten op het lied veiliggesteld. Maar er kwam nog een ander probleem naar voren: met een PEGI 12-classificatie zouden de expliciete en frequente F-bommen van Roadie het niet redden. "Dus op een ander moment hadden we zoiets van: 'Okรฉ, we hebben het nummer nu, maar we kunnen het niet gebruiken omdat we PEGI 12 zijn, dus we moeten het van de lijst halen.'"
Acosta had vrede met het weglaten van het nummer van de tracklist, maar, in zijn woorden, "misschien stonden de sterren die nacht in een bepaalde positie." Henderson was in staat om Tenacious D terug de studio in te krijgen om een โโschone versie van Roadie opnieuw op te nemen, speciaal voor Unplugged, zonder al het gevloek.
"Het was krankzinnig", zegt Acosta. โIk weet dat mijn favoriete band een nummer opnieuw heeft opgenomen voor de wedstrijd. Het is krankzinnig. Het is gewoon geweldig. En veel mensen hebben geklaagd over het feit dat het een andere versie van het nummer is, zonder vloeken. Maar daar ben ik zo trots op. Voor mij is het zelfs nog beter omdat het ons lied is.โ
Met een solide tracklist beveiligd, gingen Acosta en het team van Anotherway aan de slag om een โโonvergetelijke en betrouwbare handtracking-ervaring te creรซren. "Ik ben een UX-ontwerper, dus voor mij is het belangrijkste bij alles de gebruikerservaring. Als de ervaring niet goed is, zal het hele spel niet werken, of de hele ervaring zal waardeloos zijn, en dat wilden we niet.โ
Als gevolg hiervan werd de gameplay zelf aangepast en ontworpen om te werken met, niet tegen, handtracking. Zelfs kleine veranderingen maakten een groot verschil - de grootte van de gitaar in Unplugged is bijvoorbeeld een beetje kleiner dan een gewone, echte gitaar, waardoor je je handen in het zicht van de camera's kunt houden.
"In het begin, met handtracking 1.0, moesten we ons heel goed bewust zijn van je bewegingen", legt hij uit. "We moesten de mapping zo maken dat de muziek in kaart wordt gebracht op een manier die zich altijd bewust is van de beperkingen van de technologie."
Dat betekende dat bij de lancering de mapping in Unplugged niet altijd de muziek volledig volgde, waardoor sommige spelers klaagden dat de muziek en de noten niet altijd op รฉรฉn lijn lagen. "En we wisten waarom, maar we konden er niets aan doen, omdat de handtracking erg beperkt was en je je hand niet zo snel kon bewegen", zei hij.
Desalniettemin blijft Acosta trots op de ervaring die bij de lancering werd geboden. โIn de eerste versie was het absoluut speelbaar. Natuurlijk was het niet perfect, maar het was speelbaar. En ik denk dat we hebben bewezen dat je een handtracking-game kunt maken die heel intensief gebruikmaakt van handtracking.โ
Spring een paar maanden na de lancering vooruit en de release van Meta's Hand Tracking 2.0-software bood enorme voordelen voor Unplugged. De technologie was niet alleen betrouwbaarder dan ooit, maar hij was zo goed dat Anotherway terugging en de hele tracklist opnieuw in kaart bracht voor meer nauwkeurigheid en uitdaging. "We willen natuurlijk dat de game voor iedereen volledig toegankelijk is. Maar ik denk dat het spel voor 98% van de mensen heel goed werkt.โ
Desalniettemin implementeert Anotherway nog steeds algoritmen en tijdelijke oplossingen om fouten te verklaren en de ervaring te verbeteren - de nieuwste is een AI-systeem. โWe gebruiken deep learning om te zien waar je handen moeten zijn, wat je pose is of wat je bedoelingen zijn. We hebben al die dingen zo gemaakt [dat] wanneer er een probleem is met het volgen van de hand, er een andere laag is die probeert te helpen en de ervaring zo soepel mogelijk probeert te maken."
Er komt ook meer. Op korte termijn heeft Anotherway zojuist een nieuw DLC-pakket uitgebracht โ met nummers van metalband Pantera - en werken aan een aanstaande toegankelijkheidsupdate met nieuwe functies en "nog iets" dat topgeheim is maar "heel groot" zal zijn.
Op het gebied van songselectie is er zeker meer op komst. โWe werken er voortdurend aan om meer muziek toe te voegen. We willen [ook] gratis muziek toevoegen, niet alleen DLC. Ik wil ook meer indiemuziek toevoegen omdat ik denk dat er veel echt goede indiemuziek is.โ
Maar hoe zit het met de lange termijn? Hoe ziet het komende jaar of meer eruit voor Unplugged? "Ik kan er niet te veel over praten, want Vertigo zal me vermoorden", zegt Acosta lachend. โMaar onze plannen zijn heel groot. Unplugged wordt groter, in ieder geval qua featuresโฆโ
โIk zou heel enthousiast zijn over Unplugged als ik wist wat er gaat gebeuren. Waarschijnlijk zal Unplugged over een jaar heel anders zijn. Het zal veel meer spullen bevatten. Dat is het. Dat is alles wat ik kan zeggen."
Voor een game die al een pionier was op het gebied van nieuwe technologie op een geavanceerd stuk hardware, zouden er in de toekomst van Anotherway veel interessante ontwikkelingen kunnen zijn.
"Unplugged gaat vooruit", zei Acosta. "Dat is zeker. We zitten niet stil."
Unplugged is beschikbaar op Quest-headsets en voor handtracking geschikte pc VR-headsets op stoom. Jij kan lees hier ons volledige en bijgewerkte 2022 van het spel.
- "
- 2020
- 2021
- 2022
- a
- Over
- de toegankelijkheid
- beschikbaar
- Account
- Handelen
- advocaat
- tegen
- AI
- algoritmen
- Alles
- naast
- al
- altijd
- verbazingwekkend
- bedragen
- Nog een
- Kunstenaars
- geassocieerd
- Beschikbaar
- omdat
- worden
- vaardigheden
- Begin
- wezen
- BEST
- tussen
- groter
- Beetje
- boord
- bugs
- Bellen
- camera's
- Carriรจre
- uitdagen
- Grafieken
- hoe
- verplichting
- afstand
- compleet
- concept
- contact
- kon
- en je merk te creรซren
- aangemaakt
- Wij creรซren
- Creatieve
- schepper
- dag
- transactie
- beslist
- deep
- ontworpen
- ontwikkelde
- ontwikkelingen
- verschil
- anders
- Director
- discussies
- dromen
- gedurende
- Vroeg
- rand
- ingebed
- voortgekomen
- Milieu
- vooral
- iedereen
- alles
- precies
- voorbeeld
- opgewonden
- Exclusief
- ervaring
- extreem
- Voordelen
- Voornaam*
- volgen
- formulier
- Naar voren
- Gratis
- oppompen van
- vol
- functionaliteit
- financiering
- toekomst
- spel
- gameplay
- Spellen
- Algemeen
- doel
- gaan
- goed
- Kopen Google Reviews
- grafiek
- groot
- Groeien
- Behandeling
- gebeuren
- Hardware
- met
- hulp
- helpt
- hier
- Home
- Hoe
- Echter
- HTTPS
- reusachtig
- idee
- meeslepende
- uitvoering
- belangrijk
- verbeteren
- inclusief
- inclusie
- meer
- innoveren
- invoer
- geinspireerd
- wisselwerking
- belang
- Interview
- IT
- zelf
- Jobomschrijving:
- toegetreden
- Houden
- kinderen
- blijven
- bekend
- laatste
- lancering
- lagen
- leidend
- leren
- Verlof
- Niveau
- hefbomen
- Licenties
- Beperkt
- Lijn
- Lijst
- Elke kleine stap levert grote resultaten op!
- lang
- Kijk
- gemaakt
- groot
- maken
- manager
- in kaart brengen
- Mark
- massief
- Media
- mentaal
- metaal
- Microsoft
- macht
- geld
- maanden
- meer
- meest
- beweging
- beweging
- Muziek
- Nieuwe mogelijkheden
- volgende
- Opmerkingen
- Oculus
- aangeboden
- het aanbieden van
- Okay
- Kansen
- kansen
- Opties
- bestellen
- pandemisch
- bijzonder
- vooral
- PC
- Mensen
- stuk
- plannen
- spelers
- punt
- Pools
- positie
- mogelijk
- mooi
- probleem
- problemen
- project
- voorgestelde
- trots
- uitgevers
- geduwd
- kwaliteit
- zoektocht
- snel
- waardering
- RE
- redenen
- onlangs
- regelmatig
- uitgebracht
- betrouwbaar
- stoffelijk overschot
- weg
- Zei
- beveiligen
- Beveiligde
- selectie
- reeks
- verschuiving
- Bermuda's
- presentatie
- ZES
- Maat
- Klein
- So
- Social
- social media
- Software
- sommige
- iets
- spreken
- special
- specifiek
- Spotify
- Stadium
- stadia
- begin
- gestart
- blijven
- Stoom
- Still
- Verhaal
- sterke
- studio
- system
- Talk
- praat
- team
- Technisch
- technologisch
- Technologie
- vertelt
- termen
- De
- ding
- spullen
- niet de tijd of
- tijdrovend
- samen
- top
- spoor
- Tracking
- aanhangwagen
- begrijpen
- komende
- bijwerken
- .
- ux
- versie
- Video
- Bekijk
- Virtueel
- visie
- vr
- wachten
- gezocht
- Wat
- en
- WIE
- zonder
- woorden
- Mijn werk
- werkte
- werkzaam
- Bedrijven
- zou
- jaar
- jaar
- Your
- youtube