Challenge

Research

Mixed reality-interfaces en toetsenborden

Jerry Meng heeft een toetsenbord ontworpen in mixed reality. Het mixed-reality effect wordt bereikt door een VR-headset en een camera en die de werkelijke wereld waarneemt. Er wordt dan een laag bovenop de werkelijke wereld gelegd. Het toetsenbord en andere basis ‘point en click’ functies geeft de gebruiker de benodigde tools voor de interactie. Voorheen werd er veel gebruik gemaakt van spraak bij het gebruik van VR, want mensen konden dan geen tekstinvoer gebruiken omdat ze dit niet zagen. Maar tekstinvoer is niet altijd gewenst. Denk maar eens aan het inloggen op bijvoorbeeld een website. Je wilt niet dat iedereen je wachtwoord hoort. Of in sommige situaties moet je wel stil zijn. Door z’n toetsenbord is dit nu wel mogelijk. Ik vind dit een slimme en vooral handige functie, want je kan je normale toetsenbord natuurlijk niet zien wanneer je gebruik maakt van VR. Ook kan je inderdaad niet altijd gebruik maken van spraak.

Filmpjes:
Deel 1
Deel 2

NoLomits

Een andere VR toepassing die ik tegen kwam en mij aansprak is NoLimits 2. Dit is een game waarin het lijkt alsof je in een achtbaan zit. Dit achtbaan-simulatiespel is gemaakt door Ole Lange. Wanneer je dit spel speelt voelt het alsof je daadwerkelijk in de achtbaan zit. Dit voel je aan je benen, armen en je buik. Wel is er voor gezorgd dat je er niet heel misselijk van wordt. Dit komt omdat er gebruik gemaakt is een vast camera standpunt. Wat wel opmerkelijk is gezien de prestatie van het onderwerp.
Zelf ben ik wel heel erg benieuwd of je inderdaad niet misselijk wordt van dit spel. Ik zou ik daarom graag zelf willen proberen. Maar ook zeker om te ervaren of het echt lijkt alsof je in de achtbaan zit.

Filmpje: NoLimits - Youtube

Spark AR Studio

Als eerst heb ik Spark AR Studio gebruikt. Met dit programma heb ik een filter gemaakt, wat je de laatste tijd best vaak ziet op bijvoorbeeld Instagram. Ik heb een filter gemaakt met 'wat is jouw favoriete snack?'.
De belangrijkste stappen in het kort waren alsvolgt. Ik heb als eerst verschillende afbeeldingen gezocht en een afbeelding gemaakt met de vraag erop. Deze afbeelding moest ik in een selector zetten zodat deze later random een afbeelding zou kiezen. Via het onderste paneel moest ik ervoor zorgen dat, wanneer je op het scherm tikt, de vraag weggaat en de loop met afbeeldingen begint te spelen. Ik heb aangegeven dat de loop vier seconde blijft lopen en hij daarna stil komt te staan op een afbeelding. Toen het filter af was, kon ik via de app van Spark AR Studio en de connectie met mijn laptop de filter op mijn eigen hoofd plaatsen. Zien welke snack ik was, bekijk het filmpje.

Aframe

In de les heb ik al meerdere dingen uitgepprbeerd in A-frame. Zelf heb ik hier nog meer mee geëxperimenteerd. Ik heb onder andere een wereld gecreëerd, een vulkaan wereld en heb nog meer uitgeprobeerd met de animaties die mogelijk in A-frame.

Clara.io

Ook alvast nadenkend over mijn uiteindelijke eindontwerp, wilde ik uitvinden hoe ik al bestaande objecten in mijn eigen werk kon krijgen. Hiervoor heb ik de site Clara.io gebruikt. Ik heb verschillende objecten geplaatst in mijn A-frame project. Helaas was ik hier erg lang mee bezig, omdat het ingewikkelder was dan ik van te voren dacht. Ook heb ik animaties geplaats op een object, de skull vliegt direct je beeld binnen. Ook beweegt deze als je er met de cursor over heen gaat.

Design and Build & Showcase

Voor de Challenge van AR en VR heb ik een interactief doolhof gemaakt. Klik hier om mijn filmpje te bekijken. Zorg ervoor dat je geluid aan staat!

Ik heb dus een interactief doolhof gemaakt waarin je verschillende sleutels moet vinden om deuren te openen en je uiteindelijk bij het eindpunt uitkomt. Ik heb dit spel gemaakt in Unreal Engine. Als je de goede materialen thuis hebt kan je dit ook echt spelen in VR, maar je kan het ook spelen door middel van je laptop met toetsenbord. Ik heb gekozen om een spel te maken, omdat ik tijdens de research fase erachter kwam dat er hele leuke games bestaan in VR, dus dat wilde ik ook proberen.

In het kort heb ik de volgende stappen gedaan om dit spel te maken. Ik begon met een map maken waarin je de lichtval kan veranderen. Daarna heb ik de 'playercharacter' gemaakt en ervoor gezorgd dat die kan lopen, draaien en opkijken. Als volgt heb ik het doolhof gemaakt. Ik begon met het maken van allemaal vierkantjes en heb daarna het pad erin gemaakt met pilaren. Toen het doolhof er was heb ik de deuren en sluetels ontworden en ervoor gezorgt dat er interactie is tussen die twee met een animatie. Later heb ik er nog voor gezorgt dat je in je beeldscherm ziet hoeveel sleutels je hebt van welke kleur en heb ik alle 'enge' elementen (van Clara.io) toegevoegd. Ook heb ik ervoor gezorgt dat sommige elementen bewegen als je langs ze loopt.

Ar en VR in het algemeen

Ik wist voor deze challenge natuurlijk wel al wat AR en VR was. Ook heb ik zelf al een keer met VR gespeeld, maar door de research fase ben ik wel veel meer toepassingen tegen gekomen die ik niet wist (zeker van dat toetsenbord). Ik denk ook wel dat AR en VR steeds groter zal worden in de toekomst en dat ook in de zorg of andere sectoren steeds meer gebruik hiervan zal worden gemaakt (en zeker niet meer alleen om bijvoorbeeld spelletjes te spelen).

Eigen product

Ik vond het maken van mijn eigen product heel leuk om te doen. In het begin was het allemaal best moeilijk, zeker omdat je in Unreal Engine zoveel knoppen en opties hebt, maar later ging dit steeds soepeler. Ook dat je best vrije was met deze opdracht vond ik leuk, want je kon echt zelf bepalen wat je wilde maken. Uiteindelijk vind ik dat ik best een goed eindproduct heb neergezet en alles werkt zoals ik zou willen!

Ervaring met AR en VR

Ik vind het jammer dat ik niet mijn eigen spel in VR kan spelen, dit komt omdat ik niet de apparaten heb die je nodig zou hebben (zoals een joystick of z'n soort loopband waarop je kan lopen). Verder was het wel leuk dat je sommige voorbeelden van de workshop wel in VR kon bekijken (alleen helaas kon je niet lopen). Wat ik wel nog een keer zou willen doen is z'n spel spelen wat de gastdocent in zijn presentatie liet zien. Een soort horrorhuis en dat je er helemaal doorheen kan lopen en het echt lijkt alsof je daar bent.