ID.nl logo
Wat is on-device AI en wat heb je eraan?
© Thitichaya - stock.adobe.com
Huis

Wat is on-device AI en wat heb je eraan?

Je kunt er haast niet meer omheen: kunstmatige intelligentie. We komen AI (de Engelse afkorting van artificial intelligence) op heel veel plekken tegen. In de auto en op het web, zoals met ChatGPT of Google Bard. Maar ook op smartphones, in de vorm van on-device AI. Wat is dat?

Omdat on-device AI nogal een technisch verhaal kan opleveren, geven we in dit artikel een korte basiscursus over dat begrip. Zo weet je wat het is, en wat je eraan hebt. Na het lezen van dit artikel krijg je antwoord op de volgende vragen:

  • Wat is on-device AI?
  • Hoe werkt het?
  • Wat heb je eraan?

Het is geen geheim dat een chatbot gebruiken nadelig kan uitpakken voor je privacy. Dergelijke producten maken gebruik van gigantische datasets, die allemaal opgeslagen zijn in de cloud. Alles wat je zegt, vraagt of stelt, komt in die cloud terecht. Daarom is het raadzaam geen persoonlijke informatie met dat soort diensten te delen, of de risico’s te minimaliseren. Dat kan door middel van alternatieve accounts, maar ook met zoiets als on-device AI. Dat is een term die refereert aan kunstmatige intelligentie die geheel draait op de hardware van een product.

On-device AI heeft geen wifi nodig

Alles wat een computer of smartphone dan doet op het moment dat je kunstmatige intelligentie gebruikt, wordt volledig lokaal verwerkt. Je hebt daar dus geen internet voor nodig en er gaan geen gegevens naar de cloud. Mocht je ooit twijfelen of een smartphone daadwerkelijk beschikt over on-device AI, dan kun je de internetverbinding uitschakelen en kijken of je nog steeds kunt doen wat je wilde doen. Is dat niet het geval, en is een internetverbinding dus verplicht, dan is er dus iets mis. In principe moeten alle AI-taken offline verricht kunnen worden door de opzet van de modellen.

©Koshiro

En met modellen doelen we op bestaande AI-modellen, zoals bekende spelers als Stable Diffusion, DALLE-E, Midjourney, ChatGPT en meer. Aanvankelijk worden ze getraind in de cloud, maar dan worden ze geoptimaliseerd voor offline gebruik. Ook worden ze geoptimaliseerd, zodat ze heel efficiënt kunnen draaien op beschikbare hardware. De geoptimaliseerde AI-modellen worden daarnaast opgenomen in allerlei apps en geïnstalleerd op bijvoorbeeld je smartphone. De data die de app dan genereert, en de gegevens die je daarvoor invoert, worden geïsoleerd in een beveiligde sectie.

Wat heb je aan on-device AI?

Voor het uitvoeren van de taken gebruikt de app zowel de grafische als normale processor. Daardoor blijven je interacties dus privé. Maar wat kun je dan precies met die AI-modellen? Nou, in principe alles wat je ook met andere AI-bots kunt doen. Zo kun je binnen enkele seconden zelf een afbeelding genereren via Stable Diffusion, die je vervolgens kunt gebruiken op je smartphone, computer of sociale media (maar in het laatste geval upload je de afbeelding dus handmatig naar het internet). Het genereren van zo’n afbeelding gebeurt lokaal en is verder dus afgeschermd van internet.

©Creative_Captain - stock.adobe.com

Een ander voorbeeld is dat stemassistenten geheel offline kunnen werken. Ze kunnen dan taken verrichten die geen internet behoeven of gepersonaliseerde ervaringen voorschotelen, op basis van data die je zelf achtergelaten of gegenereerd hebt. Zo kan een assistent rekenen houden met activiteiten die je leuk vindt of sportoefeningen waar je veel waarde aan hecht. Ook kan die omgaan met natuurlijke taal en helpen bij het bewerken van foto’s en video’s. Je zou dan kunnen vragen of de digitale hulp ‘die kat links op de foto’ kan verwijderen. En dan zou dat vervolgens gebeuren.

De mogelijkheden verschillen nu per app, dienst of assistent; houd daar rekening mee. Niet elk programma is hierin gelijk, waardoor je misschien lang moet zoeken naar hetgeen je nodig hebt.

Watch on YouTube

Verder kan on-device AI een foto uitbreiden met een rand om een scene of gebeurtenis (dat kan met een recente versie van Photoshop, bijvoorbeeld). Ook kunnen de voor- en achtercamera’s van een smartphone gelijktijdig ingezet worden voor een leuk effect. Games kunnen uiteraard ook profiteren van kunstmatige intelligentie die volledig lokaal verwerkt wordt. Beelden kunnen opgeschaald worden (waardoor spellen er mooier uitzien) en er kunnen allerlei effecten toegevoegd worden. Denk dan aan ray tracing (voor realistische lichteffecten) en een hogere framerate.

Het grootste voordeel

Over het algemeen kan on-device AI de rol vervullen die jij wil. Op het gebied van audio kan kunstmatige intelligentie ervoor zorgen dat beeld en geluid altijd synchroon lopen, zodat je dat niet handmatig hoeft te doen tijdens het editen. En zo kunnen we even doorgaan. Het belangrijkste punt is dat je met on-device AI resultaten kunt boeken voor heel veel soorten taken, zonder dat je daarvoor het internet nodig hebt en je privacy in het geding komt. Aangezien smartphones en computers alleen maar beter en sneller worden, wordt on-device AI dat mettertijd ook.


Betaalbaar én goed!

De populairste smartphones tot 700 euro

Powered by Kieskeurig.nl

▼ Volgende artikel
Nieuwe FromSoftware-game The Duskbloods komt echt alleen naar Switch 2
Huis

Nieuwe FromSoftware-game The Duskbloods komt echt alleen naar Switch 2

The Duskbloods, de nieuwe game van Elden Ring- en Dark Souls-ontwikkelaar FromSoftware, zal echt alleen op Nintendo Switch 2 uitkomen.

Dat heeft de ontwikkelaar benadrukt bij het bekendmaken van zijn kwartaalcijfers (via VGC). Daarbij werd ook nog eens benadrukt dat The Duskbloods nog altijd gepland staat om ergens dit jaar uit te komen, net zoals de Switch 2-versie van Elden Ring.

Over de exclusieve Switch 2-release van The Duskbloods: "Het wordt verkocht via een samenwerking met Nintendo, met verkoopverantwoordelijkheden verdeeld per regio. De game komt alleen voor Nintendo Switch 2 beschikbaar." Daarmee is dus duidelijk gemaakt dat Nintendo een nauwe samenwerking met FromSoftware is aangegaan voor de game en dat het spel niet zomaar op andere platforms uit zal komen.

Over The Duskbloods

The Duskbloods werd begin vorig jaar aangekondigd in een speciale Nintendo Direct waarin de eerste Switch 2-games werden getoond, maar sindsdien zijn er geen nieuwe beelden van het spel uitgebracht. Zoals gezegd is de game ontwikkeld door FromSoftware, het Japanse bedrijf dat naam voor zichzelf heeft gemaakt met enorm uitdagende spellen, waaronder de Dark Souls-serie en Bloodborne. Met de openwereldgame Elden Ring scoorde de ontwikkelaar enkele jaren geleden nog een megahit.

Watch on YouTube

The Duskbloods wordt een PvPvE-game, waarbij spelers het dus tegen elkaar en tegen computergestuurde vijanden opnemen. Maximaal acht spelers doen aan potjes mee. Na het kiezen van een personage in een hub-gebied wordt men naar een gebied getransporteerd waar er met andere spelers en vijanden gevochten wordt, al kan men soms ook samenwerken om vijanden te verslaan.

Spelers besturen een 'Bloodsworn', wezens die dankzij een speciaal bloed dat in hun lichaam zit meer krachten tot hun beschikking hebben dan reguliere mensen. Ondertussen is het einde van de mensheid nabij, en bestaat de wereld uit verschillende tijdperken, wat voor een mengelmoes van stijlen zorgt.

▼ Volgende artikel
Beeldverversing versus pixels: waarom soepel gamen beter is dan scherp
© Gorodenkoff Productions OU
Huis

Beeldverversing versus pixels: waarom soepel gamen beter is dan scherp

Resolutie is marketing, refreshrate is beleving. Waar 4K zorgt voor een mooi plaatje, zorgt een hoge verversing (Hz) ervoor dat je daadwerkelijk wint. Hieronder lees je waarom snelheid in feite de échte koning is in gaming.

Veel gamers staren zich blind op 4K-resolutie. Ze kopen een duur scherm, zetten de settings op Ultra en vragen zich vervolgens af waarom hun spel stroperig aanvoelt. De misvatting is dat 'mooier' gelijkstaat aan 'beter'. In werkelijkheid is de vloeibaarheid van het beeld – de refreshrate, oftewel verversingssnelheid – veel bepalender voor hoe direct en responsief een game aanvoelt. Aan het eind van dit artikel weet je precies of jij moet kiezen voor pixels of snelheid.

Hoe je ogen bedrogen worden door Hertz

Stel je voor dat je snel met je muis over je bureaublad beweegt. Op een standaard 60Hz-scherm zie je de cursor in schokjes over het beeld springen; je hersenen vullen de gaten in. Op een 144Hz- of 240Hz-gaming-monitor verdwijnen die gaten.

Het technische verschil zit hem in de verversingssnelheid: het aantal keren per seconde dat het beeld wordt vernieuwd. Bij 60 Hz krijg je elke 16,6 milliseconden een nieuw beeld. Bij 144 Hz is dat elke 6,9 milliseconden. Dat klinkt als een klein verschil, maar je voelt het direct. Het gestotter dat je onbewust gewend bent verdwijnt. Bewegingen voelen boterzacht aan, alsof de cursor (of je crosshair) aan je hand vastgeplakt zit in plaats van er achteraan zwemt. Dit effect wordt motion clarity genoemd: objecten blijven scherp, zelfs als ze snel door het beeld bewegen.

©Framestock

De winst in shooters en snelle actie

Wanneer werkt dit in je voordeel? Vooral in competitieve shooters zoals Call of Duty, Counter-Strike of Valorant. In dit soort games telt elke milliseconde. Een hogere refreshrate vermindert de input lag, oftewel de tijd tussen jouw klik en de actie op het scherm.

Stel, je draait je personage snel om. Bij een lage refreshrate wordt de vijand een fractie later getoond en zie je veel bewegingsonscherpte (motion blur). Met een hoge refreshrate zie je de vijand eerder en scherper, waardoor je sneller kunt reageren. Je hebt letterlijk actuelere informatie dan je tegenstander. Om dat te bereiken heb je wel een krachtige videokaart nodig die genoeg beelden per seconde (FPS) kan genereren om je snelle scherm bij te houden.

Wanneer resolutie het toch wint van snelheid

Is snelheid altijd heilig? Nee. Als je vooral tragere, meer verhalende games speelt (zoals Cyberpunk 2077 in de 'sightseeing' modus), Microsoft Flight Simulator of grafische RPG's, dan voegt 240 Hz weinig toe. In deze titels kijk je vaak naar stilstaande of langzaam bewegende omgevingen.

In dat geval wil je juist de texturen van de bomen, de reflecties in het water en de details in gezichten zien. Een 4K-monitor op 60 of 120 Hz is dan een logischer keuze dan een onscherp 1080p-scherm op 360 Hz. De visuele pracht weegt hier zwaarder dan de milliseconden reactietijd. Ook voor console-gamers die op de bank zitten, is een goede televisie met 4K en HDR vaak indrukwekkender dan puur de hoogste framerates.

Situaties waarin een hoge refreshrate zinloos is

Er zijn momenten dat investeren in een snel scherm weggegooid geld is. Dat gebeurt bijvoorbeeld als je hardware de snelheid niet kan leveren; als je videokaart maar 50 frames per seconde kan leveren, heeft een 144Hz-scherm geen nut omdat het scherm wacht op de computer. Daarnaast beperken oude kabels je bandbreedte, waardoor je monitor soms terugvalt naar 60 Hz zonder dat je het doorhebt. Ook op oudere consoles zoals de Nintendo Switch of de standaard PS4 heb je niets aan snelle schermen, omdat deze hardware fysiek gelimiteerd is op 60 Hz of lager.

Bepaal wat jouw setup aankan

Kijk dus kritisch naar je huidige situatie voordat je naar de winkel rent. Heb je een high-end pc die makkelijk 120+ FPS haalt in jouw favoriete games? Dan is een upgrade naar een 144- of 165Hz-monitor de grootste sprong in spelplezier die je kunt maken. Speel je op een PlayStation 5 of Xbox Series X? Zoek dan specifiek naar een scherm met HDMI 2.1-ondersteuning om 120 Hz op 4K mogelijk te maken. Zit je ver van je scherm af en speel je relaxed? Investeer dan liever in resolutie en kleurdiepte.

©Proxima Studio

Kortom: snelheid is de sleutel tot succes!

Verversingssnelheid is belangrijker dan resolutie voor iedereen die actie- of competitieve games speelt. Het zorgt voor een vloeiender beeld, minder input lag en betere motion clarity, wat je direct een voordeel geeft in het spel. Resolutie is vooral luxe voor het oog, maar refreshrate is pure prestatie voor de speler.