Taalmodellen als ChatGPT zijn razendsnel populair geworden. Ze helpen mensen bij veel leeswerk, zoals het samenvatten zoals de verschillende standpunten van onze nationale politieke partijen. Maar hoe betrouwbaar en onbevooroordeeld zijn ze? TNO en Kieskompas hebben een experiment uitgevoerd om dat uit te zoeken.

In het experiment lieten TNO en Kieskompas verschillende taalmodellen de vragen van de stemhulp van het Kieskompas 2023 meerdere malen beantwoorden. De modellen blijken niet helemaal onbevooroordeeld: ze komen uit aan de linkerkant van het politieke spectrum. Daarnaast geven ze niet consistent antwoord op subjectieve vragen en vertonen ze door kleine veranderingen in de vraag al snel heel ander gedrag.

Welke AI-modellen zijn onderzocht?

Aan de hand van populariteit, beschikbaarheid, toegankelijkheid en herkomst zijn zijn de volgende vijf generatieve AI-taalmodellen geselecteerd: Meta’s Llama-2, OpenAI’s GPT3.5, 4, en 4.5-turbo en Falcon-40b-Instruct van TII. Elk model is geprepareerd voor het experiment, bijvoorbeeld door het opzetten van één consistente vraag. Deze is voor elk model licht aangepast om aan het specifieke format van het model te voldoen (zoals het vertalen in het Engels).

Hoe ging het experiment in zijn werk?

Modellen kunnen naast direct een vraag beantwoorden ook gebruik maken van context. Wanneer er context wordt toegevoegd, geeft dat de modellen een indicatie hoe de gebruiker de antwoorden graag wil terugzien, waardoor er soms beter resultaat teruggegeven wordt. Vandaar dat elk model getoetst is mét en zonder contextuele toevoegingen. Ze begrijpen bijvoorbeeld beter wat voor antwoord er van ze verwacht worden als ze al een voorbeeld gehad hebben van een vraag met een antwoord dat binnen de keuzemogelijkheid van het Kieskompas valt (‘Helemaal mee eens’, ‘Mee eens’, ‘Neutraal’, ‘Niet mee eens’, ‘Helemaal niet mee eens’ en ‘Geen mening’).

De antwoorden zijn door Kieskompas vertaald in coördinaten die TNO over het politiek landschap van Nederland heeft gelegd.

©Kieskompas/TNO

©Kieskompas/TNO

Resultaten: wisselvalig en niet neutraal

Wat opvalt aan de resultaten is dat de modellen heel wisselvallig zijn ( te zien aan de ingekleurde vlakken) en ook dat de modellen met name links georiënteerd zijn (zie figuren 1 en 2). Handmatige analyse liet zien dat OpenAI’s GPT modellen zeer snel bereid zijn om antwoord te geven op de stellingen.

Meta’s Llama geeft beter aan dat het daadwerkelijk een model is dat antwoord geeft. Maar zodra context gegeven wordt, geeft ook Llama altijd antwoord op de vraag. Falcon is nog het meest voorzichtig, maar ook met gegeven context door het geven van een voorbeeldvraag verandert het gedrag van dit model aanzienlijk en geeft het wel zijn mening (zoals ook te zien hieronder).

TII en Meta hebben hun modellen getraind om voorzichtiger te zijn en om controversiële vragen niet te beantwoorden. Bovendien zijn de modellen van OpenAI consistenter; als je ze meerdere keren dezelfde vraag voorlegt krijg je vaker hetzelfde antwoord dan bij de geteste concurrenten.

©Kieskompas/TNO

Modellen zijn ondoorzichtig

Doordat niet transparant is hoe de modellen getraind zijn, is het niet te zeggen of een model in een andere context een hele andere mening kan geven. Het is dus onmogelijk om te achterhalen waarom het model tot bepaalde antwoorden komt.

Dat taalmodellen vooringenomenheid en inconsistentie vertonen lijkt misschien onschuldig, maar het kan grote gevolgen hebben. Grootschalig gebruik van zulke taalmodellen kan de effecten van vooroordelen bij mensen op de lange termijn vergroten.

GPT-NL: een Nederlands taalmodel

Mede daarom gaat Nederland een eigen open taalmodel ontwikkelen: GPT-NL. Dit model is nodig voor het ontwikkelen, versterken en bestendigen van de digitale soevereiniteit. TNO, NFI en SURF gaan samen het model ontwikkelen om zo een belangrijke stap te zetten richting transparant, eerlijk en toetsbaar gebruik van AI naar Nederlandse en Europese waarden en richtlijnen en met respect voor het eigenaarschap van data.

Samsung heeft een nieuwe teaser online gedeeld van de aankomende Samsung Galaxy S26-serie, ditmaal gericht op een nieuwe privacyfunctie.

Zoals al duidelijk was, hebben de aankomende Samsung Galaxy S26-smartphones een functie voor een privacyscherm. Dit is een optie die mensen desgewenst aan kunnen zetten, zodat alleen de persoon die recht voor het scherm gepositioneerd zit of staat de inhoud van het scherm daadwerkelijk goed kan zien. Omstanders kunnen dat niet, waardoor men dus meer privacy heeft wanneer de smartphone bijvoorbeeld in het openbaar vervoer wordt gebruikt.

Als de nieuwe teaser trailer geloofd kan worden, is het privacyscherm aanzetten zo simpel als een knop omzetten - genaamd 'Zero Peeking Privacy' - waardoor de persoon naast de smartphonegebruiker in het filmpje niets meer van het scherm ziet. Als het goed is kunnen gebruikers straks er ook voor kiezen om deze optie automatisch aan te zetten voor specifieke apps of alleen delen van het scherm.

Wanneer wordt de Samsung Galaxy S26-lijn onthuld?

Onlangs bleek al dat Samsung op 25 februari de nieuwste editie van het tweejaarlijkse Galaxy Unpacked-evenement organiseert. Het is zo goed als zeker dat daar de nieuwe Samsung Galaxy S26-lijn wordt onthuld. Om precies te zijn begint het om 19:00 uur Nederlandse tijd - dan zal het evenement, dat in San Francisco wordt gehouden, ook live online te zien zijn.

Over de Samsung Galaxy S26-toestellen

Samsung brengt dit jaar naar verwachting de Galaxy S26, S26+ en S26 Ultra uit. Eind vorig jaar lekten er al foto's van dummyversies van de smartphones op social media, waaruit blijkt dat deze modellen waarschijnlijk een ovaalvormig camera-eiland krijgen, vergelijkbaar met de Galaxy Z Fold-smartphones.

Qua kleuren zouden de nieuwe Galaxy-modellen in Black Shadow, White Shadow, Galactic Blue en Ultraviolet beschikbaar komen. Zoals hierboven al gemeld zal een grote focus ook liggen op de toevoeging van het privacyscherm. Daarnaast ligt de focus op verbeterde camera's en het gebruik van AI bij het schieten van plaatjes, zo bleek onlangs al uit enkele teaservideo's.

Hideki Sato, de ontwerper van zo goed als alle spelcomputers van het Japanse bedrijf Sega, is op 77-jarige leeftijd overleden.

Volgens de Japanse X-account Beep21 (via Eurogamer) is dat afgelopen weekend gebeurd. Precieze details over zijn overlijden zijn er niet.

Sato werd ook wel liefkozend de 'vader van Sega-hardware' genoemd. Hij ging in 1971 bij Sega aan de slag en leidde in de jaren negentig de research & development-afdeling binnen Sega. Begin jaren nul was hij kort de directeur van Sega.

Sato en zijn team ontworpen de meeste hardware van Sega, waaronder consoles zoals de Mega Drive en Dreamcast, alsmede de meeste arcademachines van het bedrijf. In 2008 vertrok hij bij Sega.

Over Sega als consolebedrijf

Sega kreeg vooral voet in de markt met zijn arcademachines, maar bracht ook spelcomputers uit waarmee het zeker in de jaren negentig van de vorige eeuw veel succes had en geduchte concurrentie voor Nintendo vormde.

Met de komst van PlayStation werd Sega's positie binnen de spelcomputermarkt echter steeds kleiner, en na enkele misstappen bij de release van de Saturn-console, bracht het bedrijf al snel de opvolger uit, de Dreamcast. Hoewel deze console geliefd was onder de fans en nog altijd als een van de betere projecten van het bedrijf wordt gezien, bleek het de allerlaatste spelcomputer van Sega te worden. Sindsdien brengt het bedrijf zijn games naar consoles van Nintendo, Sony en Microsoft en pc.