Inleiding
Voordat ik aan dit onderzoek begon, was mij niet bekend dat er veel met Affective gaming gebeurde. Als ik de term hoorde, moest ik denken aan veel kabels, onhandige besturing en trage interfaces. Nu, een paar weken later, weet ik aan de ene kant meer en aan de andere kant is mijn toenmalige mening bevestigt. Dit onderzoek gaat over of affective gaming vandaag de dag al interessant genoeg is om te gebruiken in nieuwe games. Aan de hand van wat voorbeelden van meer dan twintig jaar geleden, en van slechts twintig dagen geleden, zal duidelijk worden of het al interessant genoeg is of niet. Mijn antwoord zal ik zoeken via de deelvragen en zal ik geven in de conclusie.
Deelvraag 1.0
Wat is affective gaming?
Waar hebben we het eigenlijk over?
Misschien klinkt dit als een domme vraag, maar het tegendeel is waar. Affective gaming is namelijk makkelijk te verwarren met games die slechts je fysieke reacties meten. Het moeilijke er aan is dat een game die emoties registreert, een affective game, je fysieke reacties op neemt, om daar een emotie uit te halen. Hij registreert dus je emoties via fysieke reacties. Een game die alleen je biologische reacties meet, je fysieke reacties, registreert een reactie en concludeert daar verder niets uit. Je kan met je fysieke reacties, wel een spel beïnvloeden, maar hij zal niet weten of je vrolijk bent, of juist een beetje down.
Als we terug gaan naar de hardware en bekijken wat die precies doet, is het makkelijker uit te leggen. Een game gebaseerd op je biologische reacties, zou bijvoorbeeld een scanner kunnen hebben die je Galvanic Skin Response[6] registreert. Als het je nog wat vreemd in de oren klinkt, zou je het kunnen vergelijken met de techniek die gebruikt wordt in een leugen detector. Hij meet de elektrische weerstand in de huid. Als hij hoog is, betekent dat over het algemeen dat je gespannen bent. Als hij laag is, betekent het dat je ontspannen bent. Deze techniek werd gebruikt in een spel genaamd ‘Relax-to-win’[5]. Dit spel werd in eerste instantie ‘verkocht’ als een affective game. Het spel was een race met draken. Als je ontspande, ging je draak sneller en won je de wedstrijd. Naast dat het spel een flop was, alleen mensen die het heel saai vonden wonnen de wedstrijd, was het ook geen affective game. Als je wist wat het spel registreerde, maakte het niet uit in wat voor emotionele staat je was, zolang je maar je hand kon ontspannen.
Een hoge GSR zou kunnen betekenen dat je gespannen bent. Dat je gespannen bent, zou kunnen komen omdat je bang bent, omdat je zenuwachtig bent, heel erg boos bent of stiekem heel erg opgewonden. Alleen het meten van je GSR is niet genoeg om een spel affective te maken. Om je emoties exacter te weten, moet je meer fysieke reacties meten. Zoals de hartslag, de pupilverwijding en kijkrichting, de stem, de houding en beweging en zo zou je nog lang door kunnen gaan. Het is moeilijk om exact de emotie van een mens te registreren.
Als eenmaal de juiste fysieke reacties gemeten zijn, is de affective game nog niet klaar. Zoals eerder vermeld, moet de game alle metingen opnemen en daar dan een emotie uit concluderen. Hij moet dus een flinke variëteit aan emoties in zijn geheugen hebben en verschillende dingen weten te combineren. Als het systeem eenmaal heeft vastgesteld welke emotie er in jou hoofd rond gaat, is het nog niet compleet. Als hij eenmaal weet of je vrolijk, sip, boos of gestrest bent, moet hij daar ook weer in het spel op reageren. Hij zou bijvoorbeeld rustigere muziek kunnen spelen op de achtergrond, als hij merkt dat je gestrest bent. Hij zou extra vrolijke figuurtjes in beeld kunnen laten komen als je sip bent, of verder op welke manier dan ook kunnen inspelen op andere emoties.
Een affective game is dus een game die meerdere fysieke reacties registreert, combineert en daaruit concludeert zodat hij het spel aan kan passen naar jou staat.
Deelvraag 2.0
Wat zijn momenteel de mogelijkheden op het ‘Affective Gaming’ gebied?
Een korte geschiedenis van de techniek voor de toekomst
Om de huidige ontwikkelingen te laten zien, moet ik even wat stappen terug naar waar het begon. Er zijn meerdere meningen over waar het werkelijk is begonnen, maar de mooiste die ik ben tegen gekomen, is eentje die is ontwikkeld bij het begin van gamen op zich. De Atari. De Atari is bekend als één van de eerste consoles in de game wereld. Een schitterend voorbeeld om het begin van affective gaming te showen, uiteraard. Zij kwamen namelijk in 1982 met de MindLink[4]. Zij claimde hiermee dat de hoofdband, hiernaast te zien, jou gedachten kon lezen. Je zou dus met je gedachte een game kunnen besturen. De eerste voorbeelden van ‘affective gaming’ en ook een mooie verklaring voor de vorige deelvraag. Deze hoofdband was namelijk niet tot meer in staat dan de registratie van de aanspanning van jou voorhoofdspier. Een fysieke reactie dus. Nou stond dat wel in de kleine lettertjes van de advertentie, maar toch was dat blijkbaar een te grote afknapper. De Atari MindLink is nooit werkelijk op de markt gebracht. Toch zonde. Ik had wel graag willen fronsen naar het beeldscherm om een blokje te verplaatsten.
Laten we verder in de toekomst kijken, 1997. Het is even een sprong voorwaarts, maar wel een begrijpelijke. Het programma wat er nu aankomt is het beste te vergelijken met een stemmingsring en een slechte kermis attractie. Ik heb het hier over Oshiete Your Heart[7]. Een spel wat vooral voorkwam in Japanse Arcade hallen. Het doel van het spel was een date met een meisje goed af te ronden. Naast dat je gewone controllers had, zoals een joystick en knoppen, zat er ook een scanner op. Deze mat je hartslag en de hoeveelheid zweet. Naast dat je dus de juiste moves moest doen voor je date, moest je ook rustig en cool blijven. Oke, ik moet toegeven, niet een geweldige affective game voorbeeld. Het is echter wel een goede visualisatie van hoe het affective gaming het meeste werd gebruikt. Als een grapje, een gimmick.
Het werd pas wat serieuzer in deze eeuw. In 2005 kwam Philips met het Relax-to-win[5] spel, wat ik hiervoor noemde. Je moest je dus ontspannen om het spel te winnen. Maar hoe leuk de voorbeelden ook zijn, erg affective zijn ze nog niet. Ze komen wel in de buurt en combineren verschillende fysieke reacties in spelervaring. Maar het volledige ‘affective’ pakket leek nog ver weg.
Rond datzelfde jaar kwam Jonathan Sykes, van het eMotionLab[2] in Glasgow. Hij is een van de voorlopers in de ontwikkeling van affective games. Een van zijn belangrijkste voorwaarden is dat hij wel de fysieke reacties wil meten, maar verder de game-ervaring niet verstoren. Zo heeft hij dus drie verschillende meetkundige apparaten ontwikkeld, waarmee hij de biologische responsen kan registreren. De eerste is de ‘Affective Gamepad’[2], dit is een uitgebreide versie van de Galvanic Skin Response scanner van de vorige pagina. Als tweede gebruikt hij een Eye-tracker[2], hiermee kan hij de pupilverwijding meten en het focuspunt volgen. En als laatste gebruik hij een ‘Affective Cushion’[2], waarmee hij exact de bewegingen van het lichaam kan bijhouden. Door deze drie dingen te combineren heeft bij een betrouwbare biologische registratie, waaruit hij bijna exacte emoties kan halen. Deze technieken heeft hij tot nu toe alleen maar gebruikt voor sociaal gerelateerde spellen. Zo heeft hij iDore ontwikkeld, wat een programma is om dyslexie te voorkomen bij kinderen en andere software voor autistische kinderen.
De allernieuwste ontwikkelingen in het ‘affective’ gebied, zijn bekend gemaakt op de E3. De E3 bekend als een van de belangrijkste game beurzen ter wereld, heeft meestal baanbrekende onthullingen en dit jaar is niet anders. Wii kwam met een dubieuze hartslag meter waar je een vinger ingestoken kon worden. De vraag is wat je ermee kan, hoeveel nut het heeft en of het niet allang achterhaald is. Maar er waren wel bizarre verrassingen. Zo kwamen Microsoft en Xbox met Mylo[3], te zien hiernaast. Een volledig interactief geprogrammeerd jongetje die, volgens Microsoft, je stem, gezicht en emoties herkent. Wat hiervan waar is en hoe goed hij werkelijk interactief is, blijft de vraag. Het enige wat ze hebben laten zien is een trailer.
Als je het zo terug kijkt, van de afgelopen twintig jaar, zie je wel dat de ontwikkeling snel is gegaan. We hebben zeker de laatste vijf jaar een gigantische ontwikkeling door gemaakt. Of we echter de volledige affective game al bereikt hebben, valt te betwijfelen.
Deelvraag 3.0
Wat voor toevoeging zou het kunnen bieden aan een game?
Waarom deze zoektocht?
Waarom willen we zo graag een game die onze emoties detecteert en daar op inspeelt? Waarom is zo’n platte game ervaring niet goed genoeg? Het onderzoek van Kiel Mark Gilleade en Alan Dix geeft hier een mooi antwoord op. Ieder mens is anders en zelfs ieder mens is op elk moment weer anders. Hierdoor is een game op het ene moment interessant en op een ander moment te druk. Andersom geldt het zelfde. Wat op het ene moment spannend kan zijn, kan op het andere moment slaapverwekkend worden. Dus gaan de ontwikkelaars op zoek naar een spel wat het allemaal heeft. Nou is dit simpelweg onmogelijk, maar toch zijn ze graag op zoek. Zo kwamen Gilleade en Dix met een theorie, kort samengevat; ‘Assist Me, Challenge Me, Emote Me’[1]. Deze theorie verteld over hoe men graag een game wil hebben en hoe affective gaming dat zou kunnen bieden. Het eerste punt, Assist Me[1], gaat over hoe affective gaming je zou kunnen helpen. Stel je bent moe en gefrustreerd. Een affective game zou dat herkennen en daar op in kunnen spelen. Hij zou het allemaal een stukje trager kunnen laten gaan en irritante herhalingen van dezelfde vijanden eruit kunnen halen. Zo helpt het spel je verder. ‘Assist Me’ dus. Het tweede punt is ‘Challenge Me’[1]. Dit gaat over hoe een affective game een fris en fruitig persoon zou kunnen uitdagen. Als iemand wakker en alert is en een spel gaat spelen, is hij in voor een uitdaging. Het spel registreert dat en laat het allemaal wat sneller gaan zodat de persoon niet verveeld raakt. De laatste regel uit de theorie is wat lastiger voor een spel om voor elkaar te krijgen. Deze ‘Emote Me’[1] is dan ook de meest theoretische uit de drie. De gameplay wat trager of sneller laten gaan is zo moeilijk niet, maar om de speler te emotioneren, is weer een ander niveau. De laatste regel uit de theorie gaat over het emotionele aspect van het spel. Maar het is lastig om iemand te kunnen verrassen, te laten schrikken, stil te krijgen en zelfs de tranen omhoog te kunnen roepen. Hiervoor is meer nodig dan alleen de huidige emotionele staat. Hiervoor is het verleden belangrijk, de ervaringen van de persoon en hoe gewend hij of zij aan het spelen van games. Wel is het een vooruitzicht van de Affective Game. Een idealistische weliswaar, maar wel een vooruitzicht.
Als we dit geheel zouden samenvatten en terug zouden kijken naar de vraag bovenaan, is het antwoord simpel. Het affective aspect zou een verdieping worden van de speelervaring. Het spel is nooit meer hetzelfde en zal zich aanpassen aan jou.
Conclusie
Is affective gaming nu al interessant genoeg om de game ervaring te verrijken?
Aan het begin wist ik nog niet heel veel van het onderwerp, dat moet ik toegeven. Maar het woord game zat er in en dan ben ik geïnteresseerd. Het heeft even geduurd voordat ik door had dat affective met emoties te maken had en toen dat eenmaal begon te dagen, begon de informatiestroom een flinke versnelling op te lopen. Mijn eerste instelling was dat de technologie er nog lang niet ver genoeg voor was. De vraag in deze conclusie is of mijn eerste instelling weerlegt zal worden, of bij zijn originele standpunt zal blijven.
Het hele proces van het registreren, combineren, concluderen en converteren leek mij te complex om snel verwerkt te kunnen worden in een game. Het zou misschien wel kunnen, maar dan op zo’n laag tempo dat het niet interessant genoeg is om nu al in een spel te verwerken. Als je de ontwikkelingen van de afgelopen decennia bekijkt, zijn er grote stappen voorwaarts genomen. Er is veel verandert en de technologie is flink vooruit gegaan. Maar toch was ik nog niet erg onder de indruk. Dat kwam pas toen ik de trailer van Xbox zag en hun nieuwe vriendje Mylo. Hierin zag je directe interactie tussen mens en software. Vloeiend, zonder haperen, zonder misverstanden, zonder dat er dingen herhaalt moesten worden. Vanuit de organisatie werd de belofte gemaakt dat hij jou emoties zou kunnen herkennen aan je stem en je gezicht. Maar als ik deze losse beloftes vergelijk met de doorgronde onderzoeken van Jon Sykes, betwijfel ik of Mylo dan wel zo affective is als beloofd. Het enige wat het doet is je stem herkennen en daar op reageren. Dat is knap, dat moet ik zeggen. Daarnaast volgt hij je bewegingen, maar dat is al niet bijzonder meer. Verder kan de hele trailer in scene zijn gezet, dus hoe waarheidsgetrouw het is, is niet vast te stellen.
Zo kom ik weer terug bij mijn eerste deelvraag. Wanneer is het precies een affective game? Ik denk nog steeds dat de huidige technologie niet ver genoeg is om een volledige affective game op poten te zetten. Zo affective als de heren Gilleade en Dix in hun theorie graag zagen. Ik denk dat de games die nu ‘affective’ genoemd worden, meer uitgebreide versies zijn van de games die op biologische reacties reageren. Nu kunnen games natuurlijk meer hebben en kunnen de fysieke reacties beter gemeten worden, maar ze zijn nog lang niet ver genoeg om een volledige affective game op de markt te zetten. Daar zullen vast en zeker nog enkele jaren onderzoek aan vooraf gaan. Dus geniet van Mylo tot zover dat gaat, maar hou de ogen open voor de echte affective game, want die ligt in het verschiet.
Bronnen
[1] ‘Affective Videogames and Modes of Affective Gaming: Assist Me, Challenge Me, Emote Me’ Kiel Mark Gilleade, Alan Dix
[2] eMotionLab; http://www.stephenelphick.com/emotion_labs/; Jon Sykes
[3] Project Natal, Xbox; http://www.xbox.com/en-US/live/projectnatal/
http://www.youtube.com/watch?v=CvjEJkZi8bw
[4] Atari Museum; http://www.atarimuseum.com/videogames/consoles/2600/mindlink.html
[5] Relax-to-win; http://www.engadget.com/2005/05/09/philips-designs-relax-to-win-game/
[6] Galvanic Skin Response; http://bsamig.uku.fi/research/gsr.shtml
[7] Oshiete Your Heart; http://www.usagi.org/doi/tokimemo/oshiete/index.html
(Niet erg wetenschappelijk, maar er is verder weinig over te vinden)
Geen opmerkingen:
Een reactie posten