De camera van je smartphone kan samen met de rekenkracht van dat apparaatje, jou een heel andere kijk op de wereld geven. Een digitale wereld wordt gecombineerd met de echte wereld, het wordt ook wel augmented reality genoemd. We hebben er dankzij Pokémon Go massaal kennis mee kunnen maken, maar AR zal straks ook op andere (praktische) manieren veel levens veranderen.

We staan aan de vooravond van een nieuwe computerrevolutie – na de thuiscomputer, het internet en de smartphone kan augmented reality veel van onze wereld veranderen. Zelfs Apple is er inmiddels mee bezig. De eerste virtualreality-headsets liggen al enige tijd in de winkels, maar het gebruik daarvan blijft beperkt tot de computerkamer (en tot een select publiek). Bovendien is het vaak helemaal niet handig om je helemaal van de buitenwereld af te sluiten en in een virtuele wereld te duiken. Wat we nodig hebben voor een nieuwe computerrevolutie, is dat we de kracht van vr mee kunnen nemen, om het toe te passen in ons dagelijks leven. En daar komt augmented reality om de hoek.

Deze technologie maakt het mogelijk dat we de echte wereld gewoon kunnen zien, en dat de computer hier realtime nieuwe elementen aan toevoegt. We kennen dit principe al van bepaalde smartphone-apps. Een tijdlang was de app Layar veel in het nieuws. Deze Nederlandse app projecteert informatie op het smartphone/tabletscherm op basis van de gps-locatie van je toestel. Zo kun je bijvoorbeeld zien waar de dichtstbijzijnde pinautomaat te vinden is. Inmiddels is die app meer gericht op het verrijken van bijvoorbeeld advertenties met bewegende of driedimensionale beelden.

Een bekender recent voorbeeld van augmented reality is Pokémon Go. De camera van de smartphone toont de gewone straat, de computer tekent hier een fictief wezentje in.

©PXimport

Primitief

Pokemon Go is een zeer beperkt voorbeeld. Wie het spel wel een gespeeld heeft, ziet onmiddellijk dat de monstertjes in het beeld zijn gemonteerd, zodat er nooit sprake is van een overtuigende illusie. Bovendien is het niet meer dan een gimmick. Maar om heel het fenomeen AR daarmee af te doen als nutteloos, is te kort door de bocht. Echte AR gaat namelijk een stuk verder. Een apparaat dat gebruikmaakt van AR en veel verder gaat, is de Microsoft Hololens. Dit peperdure apparaat bestaat uit een soort helm met doorzichtig vizier. Als je de Hololens op hebt, zorgt de hardware ervoor dat je ogen computer-gegenereerde voorwerpen zien, die overtuigend in de ruimte lijken te bestaan. Je kunt ernaartoe lopen, ze van alle kanten bekijken én met eenvoudige handgebaren manipuleren. Het interessante hiervan is dat de Hololens zelf de omgeving scant om de computerbeelden er stabiel in te projecteren. Het is daarom bijvoorbeeld mogelijk om virtuele beeldschermen of televisies in je echte kamer te projecteren, die je via de Hololens kunt bekijken. Stel je voor: een bioscoopscherm in je slaapkamer dat er alleen is als je je AR-bril draagt. Geen montage, geen verlies van ruimte en geen extra kosten voor dat grote scherm. Hololens is echter nog in de prototype-fase, wat blijkt uit de kosten (ca. 3000 dollar) en het feit dat het effectieve blikveld nog erg klein is. Dat verstoort de illusie, waardoor het resultaat slechts voor beperkte toepassingen interessant is.

Niet alleen Microsoft werkt aan een dergelijke bril. Ook concurrent MetaVision werkt aan zo’n systeem. Het meest recente product van MetaVision, de Meta 2, doet ongeveer wat Hololens doet, maar voor de helft van de prijs. Dat is nog steeds een stevige 1500 dollar. De Meta 2 moet je net als een vr-bril aansluiten op een krachtige pc. Dat betekent dat je bewegingsvrijheid ophoudt bij het einde van de kabel.

Instructie

De Meta 2 en de Hololens zetten in op zeer geavanceerde (en dure) hardware, en zien er op dit moment nogal log uit. Het is ondenkbaar dat we straks allemaal in de trein zitten met een dergelijk gigantisch ding op ons hoofd. De grote AR-brillen zijn onder andere hierdoor nog lang niet geschikt voor het dagelijks leven. Maar er zijn al wel goede professionele toepassingen voor. Een heel interessante is de mogelijkheid om op afstand instructies te geven aan iemand die een AR-bril draagt. Voor Hololens bestaat al een dergelijke app, waarbij een onderhoudsmonteur die op locatie een onbekend probleem tegenkomt, hulp kan inroepen van de expert op het hoofdkantoor. De expert kan dan via de Hololens meekijken en zelfs in het blikveld van de monteur tekenen om bijvoorbeeld een onderdeel aan te wijzen of om duidelijk te maken in welke richting iets gedraaid moet worden. Dit zijn uiteraard nog zeer specifieke applicaties, die we met de beste wil van de wereld nog niet kunnen omschrijven als een nieuwe computerrevolutie. Daarvoor moet augmented reality eerst draagbaar en gebruikersvriendelijk worden.

©PXimport

Tracking

Smartphones waren zoals gezegd al geschikt voor primitieve vormen van AR. Het grote probleem daarbij bleef echter de ‘tracking’, wat wil zeggen dat de smartphone niet in staat was om (zoals Hololens dat wel kan) de omgeving te scannen voor het accuraat positioneren van de 3D-objecten. Sommige apps gebruiken daarom ‘markeerkaarten’ als hulpmiddel om de voorwerpen toch in de echte wereld te verankeren. Albert Heijn had in 2017 nog een actie met ruimtevaartplaatjes. Richt de camera van de smartphone op het kaartje en de app toont bijvoorbeeld het ruimtestation ISS, waar je dan omheen kunt lopen om het van alle kanten te bekijken.

Een dergelijke tracking-oplossing is natuurlijk erg onhandig, en daarom niet geschikt voor massaal gebruik in allerlei onverwachte omgevingen.

©PXimport

AR Kit

En hier komt Apple om de hoek kijken. Het bedrijf introduceerde op de World Wide Developer Conference 2017 de ARKit voor iOS. ARKit is een onderdeel van iOS 11, en het moet van elke iPhone 6s en nieuwer en iPad Pro een beter AR-apparaat maken. De grote technologische doorbraak zit hem in de ingebouwde tracking-software die automatisch de omgeving scant en leert kennen, zodat 3D-voorwerpen erin kunnen bestaan. Het knappe is dat dit werkt zonder markeerkaarten en in elke omgeving: zowel binnen als buiten. Helemaal bijzonder is dat dit systeem werkt met de standaard enkele camera die in elk mobiel Apple-apparaat zit. Om aan te geven hoe belangrijk dit is: tot nu toe zijn er slechts enkele Android-smartphones die vergelijkbare solide 3D-tracking mogelijk maken met Google Tango (Googles AR-systeem), maar die toestellen hebben hiervoor een ingebouwde stereoscopische camera nodig. Dat betekent dus twee lenzen die tegelijk de omgeving ‘zien’ en daardoor net als onze menselijke ogen diepte kunnen waarnemen. En hoewel Googles nieuwe ARCore (doorontwikkeling van Tango, zie kader) vergelijkbaar lijkt met ARKit, is het minder krachtig omdat het rekening moet houden met meer verschillende soorten Android-toestellen.

ARCore

Meetlint

ARKit heeft dus genoeg aan een enkele camera en kan met zeer hoge accuratesse posities in de ruimte vastleggen. Een demonstratie-app toont bijvoorbeeld een virtueel meetlint. Een andere test-app toont een 3D-personage uit het spel Overwatch, dat je in de huiskamer kunt laten staan. Zelfs als je de kamer verlaat, de trap op gaat, weer beneden komt en de huiskamer opnieuw binnenstapt, staat het personage nog op dezelfde plek, met hooguit enkele centimeters verschil. Ook buiten op grasvelden of op straat blijkt de tracking goed genoeg te functioneren voor het plaatsen van bijvoorbeeld een virtueel portaal naar een andere wereld of het laten verschijnen van virtuele monsters die moeten worden verslagen.

©PXimport

Waarom?

Je vraagt je wellicht af wat het nut is van al die virtuele projecties op je smartphonescherm. De eerste praktische toepassingen zijn echter al in de maak of zelfs al beschikbaar. Een intrigerende is IKEA Place. Hiermee kun je meubels uit de IKEA-catalogus ‘uitproberen’ in je eigen kamer. En omdat de tracking van ARKit zo precies is, zie je ook echt of die nieuwe bank of die nieuwe kast werkelijk past. Vervolgens kun je eromheen lopen of juist dichterbij komen om de materialen te inspecteren en om te zien of de kleuren wel matchen met de rest van je interieur.

Er zijn ook al toepassingen in gaming- en amusementsapps gesignaleerd. Zo is er een ‘Rupsje Nooitgenoeg’-app in de maak, waarbij het gelijknamige rupsje door je kamer kruipt en je het eten kunt geven. Ook zijn er diverse games (van een Walking Dead-app tot complete virtuele bordspellen) in de maak, waarbij de echte en virtuele wereld tegelijkertijd een rol spelen.

En ook dit is slechts het begin. Niet in de laatste plaats omdat ARKit eigenlijk helemaal niet bedoeld lijkt voor smartphones en tablets. Het is namelijk eigenlijk best onhandig om je telefoon vast te houden terwijl je in de gemengde werkelijkheid op het scherm tuurt. Bovendien is het beeld op het scherm plat, waardoor je niet hetzelfde gevoel voor schaal of ‘aanwezigheid’ krijgt als in een vr-bril of een Hololens.

©PXimport

Toekomst

Het is daarom een zeer voor de hand liggende stap dat augmented reality over niet al te lange tijd zijn weg vindt naar draagbare hardware, in de vorm van lichtgewicht brillen die lang niet zo opvallend zijn als de enorme Meta 2 of Hololens. Het interessante van Apples ARKit is dat het bewijst dat alle intensieve tracking- en 3D-berekening heel goed gedaan kunnen worden door een smartphone. Een smartphone die iedereen toch al in zijn of haar broekzak heeft zitten, en die dan ook verbinding kan maken met de AR-bril.

Een dergelijk concept is trouwens al enige tijd in de maak bij het bedrijf Magic Leap, dat precies op die manier AR-brillen wil maken. Je draagt iets op je neus dat lijkt op een gewone bril en die is met een kabeltje verbonden met de processor-eenheid in je broekzak. Dergelijke brillen hebben echter nog wel wat technische obstakels, zoals batterijduur, gewicht en kwaliteit van het scherm. De Hololens laat ons zien hoe belangrijk het is dat het hele blikveld gevuld wordt met de illusie.

©PXimport

Mode

Maar er is misschien nog wel een grotere barrière die de massale acceptatie van AR-brillen in de weg staat. Dat ondervond Google een aantal jaren geleden al met de Google Glass, een apparaat dat je als bril droeg, die ‘picture-in-picture’ een computerscherm in je blikveld projecteerde – overigens geen AR. Het grote probleem was echter dat de bril al snel werd gezien als een inbreuk op de privacy. Google Glass had immers een ingebouwde camera en voor toeschouwers was het niet te zien of en wanneer de camera actief was. Al snel werd Google Glass geweerd uit restaurants en bars, wat uiteindelijk meespeelde bij het stopzetten van het project. De maatschappij was gewoon niet klaar voor het accepteren van dergelijk verregaande persoonlijke tech.

Ook Apple ontdekte al dat er bij nieuwe draagbare technologie met andere maatstaven gemeten wordt dan bij bijvoorbeeld een smartphone. Zo is de Apple Watch nog steeds geen doorslaand succes, en een van de redenen die hiervoor wordt gegeven is dat het ding eenvoudigweg niet modieus is. Het zal dan ook een hele uitdaging zijn voor de ontwerpers binnen Apple en zijn concurrenten om van smart-brillen ook werkelijk iets moois te maken. Een bril bepaalt je uiterlijk immers nog meer dan een horloge. En hoewel een goede AR-bril je een blik kan gunnen in een totaal andere wereld, ziet je omgeving je nog steeds voor schut zitten in deze werkelijkheid.

©PXimport

The Duskbloods, de nieuwe game van Elden Ring- en Dark Souls-ontwikkelaar FromSoftware, zal echt alleen op Nintendo Switch 2 uitkomen.

Dat heeft de ontwikkelaar benadrukt bij het bekendmaken van zijn kwartaalcijfers (via VGC). Daarbij werd ook nog eens benadrukt dat The Duskbloods nog altijd gepland staat om ergens dit jaar uit te komen, net zoals de Switch 2-versie van Elden Ring.

Over de exclusieve Switch 2-release van The Duskbloods: "Het wordt verkocht via een samenwerking met Nintendo, met verkoopverantwoordelijkheden verdeeld per regio. De game komt alleen voor Nintendo Switch 2 beschikbaar." Daarmee is dus duidelijk gemaakt dat Nintendo een nauwe samenwerking met FromSoftware is aangegaan voor de game en dat het spel niet zomaar op andere platforms uit zal komen.

Over The Duskbloods

The Duskbloods werd begin vorig jaar aangekondigd in een speciale Nintendo Direct waarin de eerste Switch 2-games werden getoond, maar sindsdien zijn er geen nieuwe beelden van het spel uitgebracht. Zoals gezegd is de game ontwikkeld door FromSoftware, het Japanse bedrijf dat naam voor zichzelf heeft gemaakt met enorm uitdagende spellen, waaronder de Dark Souls-serie en Bloodborne. Met de openwereldgame Elden Ring scoorde de ontwikkelaar enkele jaren geleden nog een megahit.

The Duskbloods wordt een PvPvE-game, waarbij spelers het dus tegen elkaar en tegen computergestuurde vijanden opnemen. Maximaal acht spelers doen aan potjes mee. Na het kiezen van een personage in een hub-gebied wordt men naar een gebied getransporteerd waar er met andere spelers en vijanden gevochten wordt, al kan men soms ook samenwerken om vijanden te verslaan.

Spelers besturen een 'Bloodsworn', wezens die dankzij een speciaal bloed dat in hun lichaam zit meer krachten tot hun beschikking hebben dan reguliere mensen. Ondertussen is het einde van de mensheid nabij, en bestaat de wereld uit verschillende tijdperken, wat voor een mengelmoes van stijlen zorgt.

Resolutie is marketing, refreshrate is beleving. Waar 4K zorgt voor een mooi plaatje, zorgt een hoge verversing (Hz) ervoor dat je daadwerkelijk wint. Hieronder lees je waarom snelheid in feite de échte koning is in gaming.

Veel gamers staren zich blind op 4K-resolutie. Ze kopen een duur scherm, zetten de settings op Ultra en vragen zich vervolgens af waarom hun spel stroperig aanvoelt. De misvatting is dat 'mooier' gelijkstaat aan 'beter'. In werkelijkheid is de vloeibaarheid van het beeld – de refreshrate, oftewel verversingssnelheid – veel bepalender voor hoe direct en responsief een game aanvoelt. Aan het eind van dit artikel weet je precies of jij moet kiezen voor pixels of snelheid.

Hoe je ogen bedrogen worden door Hertz

Stel je voor dat je snel met je muis over je bureaublad beweegt. Op een standaard 60Hz-scherm zie je de cursor in schokjes over het beeld springen; je hersenen vullen de gaten in. Op een 144Hz- of 240Hz-gaming-monitor verdwijnen die gaten.

Het technische verschil zit hem in de verversingssnelheid: het aantal keren per seconde dat het beeld wordt vernieuwd. Bij 60 Hz krijg je elke 16,6 milliseconden een nieuw beeld. Bij 144 Hz is dat elke 6,9 milliseconden. Dat klinkt als een klein verschil, maar je voelt het direct. Het gestotter dat je onbewust gewend bent verdwijnt. Bewegingen voelen boterzacht aan, alsof de cursor (of je crosshair) aan je hand vastgeplakt zit in plaats van er achteraan zwemt. Dit effect wordt motion clarity genoemd: objecten blijven scherp, zelfs als ze snel door het beeld bewegen.

©Framestock

De winst in shooters en snelle actie

Wanneer werkt dit in je voordeel? Vooral in competitieve shooters zoals Call of Duty, Counter-Strike of Valorant. In dit soort games telt elke milliseconde. Een hogere refreshrate vermindert de input lag, oftewel de tijd tussen jouw klik en de actie op het scherm.

Stel, je draait je personage snel om. Bij een lage refreshrate wordt de vijand een fractie later getoond en zie je veel bewegingsonscherpte (motion blur). Met een hoge refreshrate zie je de vijand eerder en scherper, waardoor je sneller kunt reageren. Je hebt letterlijk actuelere informatie dan je tegenstander. Om dat te bereiken heb je wel een krachtige videokaart nodig die genoeg beelden per seconde (FPS) kan genereren om je snelle scherm bij te houden.

Wanneer resolutie het toch wint van snelheid

Is snelheid altijd heilig? Nee. Als je vooral tragere, meer verhalende games speelt (zoals Cyberpunk 2077 in de 'sightseeing' modus), Microsoft Flight Simulator of grafische RPG's, dan voegt 240 Hz weinig toe. In deze titels kijk je vaak naar stilstaande of langzaam bewegende omgevingen.

In dat geval wil je juist de texturen van de bomen, de reflecties in het water en de details in gezichten zien. Een 4K-monitor op 60 of 120 Hz is dan een logischer keuze dan een onscherp 1080p-scherm op 360 Hz. De visuele pracht weegt hier zwaarder dan de milliseconden reactietijd. Ook voor console-gamers die op de bank zitten, is een goede televisie met 4K en HDR vaak indrukwekkender dan puur de hoogste framerates.

Situaties waarin een hoge refreshrate zinloos is

Er zijn momenten dat investeren in een snel scherm weggegooid geld is. Dat gebeurt bijvoorbeeld als je hardware de snelheid niet kan leveren; als je videokaart maar 50 frames per seconde kan leveren, heeft een 144Hz-scherm geen nut omdat het scherm wacht op de computer. Daarnaast beperken oude kabels je bandbreedte, waardoor je monitor soms terugvalt naar 60 Hz zonder dat je het doorhebt. Ook op oudere consoles zoals de Nintendo Switch of de standaard PS4 heb je niets aan snelle schermen, omdat deze hardware fysiek gelimiteerd is op 60 Hz of lager.

Bepaal wat jouw setup aankan

Kijk dus kritisch naar je huidige situatie voordat je naar de winkel rent. Heb je een high-end pc die makkelijk 120+ FPS haalt in jouw favoriete games? Dan is een upgrade naar een 144- of 165Hz-monitor de grootste sprong in spelplezier die je kunt maken. Speel je op een PlayStation 5 of Xbox Series X? Zoek dan specifiek naar een scherm met HDMI 2.1-ondersteuning om 120 Hz op 4K mogelijk te maken. Zit je ver van je scherm af en speel je relaxed? Investeer dan liever in resolutie en kleurdiepte.

©Proxima Studio

Kortom: snelheid is de sleutel tot succes!

Verversingssnelheid is belangrijker dan resolutie voor iedereen die actie- of competitieve games speelt. Het zorgt voor een vloeiender beeld, minder input lag en betere motion clarity, wat je direct een voordeel geeft in het spel. Resolutie is vooral luxe voor het oog, maar refreshrate is pure prestatie voor de speler.