Vraag je je ook weleens af welke vogelsoorten er allemaal je tuin bezoeken? Met een Raspberry Pi en een microfoon kun je de hele dag het geluid in je tuin opnemen. De software BirdNET-Pi herkent daarin vogeldeuntjes en toont je handige statistieken van wanneer welke vogels te horen zijn. In deze masterclass bouwen we een Raspberry Pi in een waterdichte doos in en installeren we er BirdNET-Pi op.

Vraag je je tijdens een wandeling weleens af welke vogel dat speciale deuntje laat horen? Om die vraag te beantwoorden, zou je BirdNET eens moeten kunnen proberen, een app voor Android en iOS die vogelsoorten kan onderscheiden aan de hand van geluidsopnames. Onder de motorkap draait een neuraal netwerk van onderzoekers van Cornell University dat op geluiden van drieduizend vogelsoorten is getraind. Je neemt enkele seconden van het deuntje op je mobieltje op, de app analyseert die vervolgens en benoemt daarna de vogels waarvan het geluid daar het meest op lijkt.

Patrick McGuire heeft een versie van BirdNET gemaakt die op de Raspberry Pi werkt. De software luistert continu naar het geluid van een usb-microfoon en herkent daarin realtime vogelgeluiden. Dat werkt op een Raspberry Pi 4B, 3B+ en Zero W 2. Om van alle mogelijkheden te kunnen genieten, is een Raspberry Pi 4B wel aangeraden.

Raspberry Pi OS Lite installeren

BirdNET-Pi vereist de 64bit-versie van Raspberry Pi OS. Je dient de Lite-variant te installeren. Dat gaat het eenvoudigst met het programma Raspberry Pi Imager. Klik op Selecteer OS / Raspberry Pi OS (other) / Raspberry Pi OS Lite (64-bit). Klik dan op Kies opslagapparaat en kies de microSD-kaart die je in je kaartlezer hebt gestoken.

Open met een klik op het tandwiel rechtsonder de geavanceerde instellingen. Geef je Pi een hostname, schakel ssh in en stel een gebruikersnaam en wachtwoord in. Stel ook het wifi-netwerk in waarmee de Pi moet verbinden en stel de juiste tijdzone in. Klik daarna op Opslaan en op Schrijf om het besturingssysteem op het microSD-kaartje te installeren. Wanneer dit klaar is, steek je het kaartje in je Raspberry Pi en start je die op.

BirdNET-Pi installeren

Wacht nu even tot je Raspberry Pi is opgestart. De eerste keer kan dat een tijdje duren. Log daarna in op je Raspberry Pi via een aangesloten toetsenbord en beeldscherm, of via ssh via het netwerk. Update de pakketbronnen en upgrade alle pakketten met deze twee opdrachten:

sudo apt update

sudo apt dist-ugprade

Voer daarna het installatieprogramma van BirdNET-Pi uit:

curl -s https://raw.githubusercontent.com/mcguirepr89/BirdNET-Pi/main/newinstaller.sh | bash

De installatie duurt even. Op het einde herstart de Raspberry Pi automatisch. Log daarna opnieuw in en schakel de Pi uit met de opdracht sudo poweroff.

Microfoon

Voordat we de software verkennen, gaan we eerst de hardware in orde brengen. Allereerst ga je ook zoek naar een geschikte microfoon. Op het discussieforum van BirdNET-Pi op GitHub vind je enkele suggesties voor microfoons, zoals de RØDE VideoMic NTG. Je kiest of een usb-microfoon of een usb-audiokaart waarop je dan via een 3,5mm-aansluiting een microfoon aansluit.

Wat je ook doet, gebruik altijd een usb-verlengkabel, want als de microfoon of geluidskaart zich te dicht bij de Raspberry Pi bevindt, levert dit elektromagnetische interferentie op in de microfoon en daardoor ruis in het audiosignaal. De kwaliteit van de vogelherkenning lijdt daaronder.

Waterdichte installatie

Als je in je tuin vogelgeluiden wilt herkennen, dan moet je Raspberry Pi in een waterdichte behuizing zitten. We gaan ervan uit dat je een stopcontact in de buurt hebt. Zo niet, dan moet je ook een grote powerbank in de behuizing inbouwen.

Wij kiezen een universele behuizing van Hammond Electronics van 220 × 165 × 85 cm gemaakt van ABS-kunststof en boren er een gat in om een inbouw-usb-connector voor twee kabels in te monteren. Aan de binnenzijde van de behuizing sluiten we ene usb-kabel via een usb-c-naar-usb-a-adapter aan op de usb-c-voedingspoort van de Raspberry Pi, en de andere op een usb-a-poort van de Raspberry Pi. Aan de buitenkant sluiten we op de ene usb-connector een kabel aan naar een usb-voedingsadapter (let op: de kabel moet hiervoor aan beide kanten een mannelijke usb-a-stekker hebben). Op de andere usb-connector sluiten we de usb-microfoon aan. Omdat het in de behuizing warm kan worden, monteren we ook een koelelement op de Raspberry Pi.

Instellingen

Als je alles aangesloten hebt, schakel dan je Raspberry Pi weer in. Bezoek nu in je browser het adres http://IP met in plaats van IP het ip-adres van je Raspberry Pi. Voorlopig is er nog niet veel te zien, maar als alles goed is, heeft je Raspberry Pi de microfoon automatisch herkend en is hij al continu bezig om geluid op te nemen en te analyseren op de aanwezigheid van bekende vogelgeluiden.

Maar voordat we in de resultaten duiken, lopen we eerst enkele basisinstellingen na en passen die eventueel aan. Klik bovenaan op Tools en meld je aan met gebruikersnaam birdnet en een leeg wachtwoord. Klik dan op Settings.

Kijk of de automatisch ingevulde coördinaten overeenkomen met je locatie, want het herkenningsalgoritme houdt hiermee rekening, zodat het geen vogels suggereert die alleen op een ander continent voorkomen. Stel ook bij Localization je taal in (Nederlands staat ertussen), zodat je de vogelnamen niet in het Engels krijgt en telkens moet opzoeken. Klik onderaan op Update Settings.

Afbeeldingen

BirdNET-Pi kan ook foto’s bij de gedetecteerde vogels tonen. Die haalt het dan van Flickr. Daarvoor heb je een Flickr API-sleutel nodig, die je gratis kunt aanvragen. Kies bij de aanvraag voor Apply for a non-commercial key en leg dan in enkele zinnen uit waarvoor je de API-sleutel nodig hebt. Na een klik op Submit krijg je een sleutel en geheim. Met dat geheim hoef je in deze masterclass verder niks.

De sleutel is een reeks van 32 hexadecimale cijfertekens. Vul die sleutel in op de pagina Tools / Settings van BirdNET-Pi, in het veld Flickr API Key, en klik op Update Settings. Vanaf nu verrijkt BirdNET-Pi zijn interface met foto’s van de gedetecteerde vogels. Als je niet zomaar foto’s van willekeurige bronnen vertrouwt, dan kun je in de instellingen ook een specifieke Flickr-gebruiker opgeven. BirdNET-Pi zoekt dan alleen bij die gebruiker naar foto’s.

Overzicht

Keer nu terug naar de overzichtspagina. Als BirdNET-Pi al even actief is, krijg je hier bovenaan statistieken te zien met de top tien herkende vogels, in totaal en per uur. Eronder krijg je een spectrogram te zien van de meest recente detectie. Zo’n spectrogram toont de frequenties die op elk moment in het audiosignaal aanwezig zijn. Het is een soort ‘vingerafdruk’ van het geluid, en het is deze afbeelding die het neurale netwerk als invoer krijgt en waarin het naar patronen zoekt die kenmerkend voor elke vogelsoort zijn.

Eronder krijg je een lijst met de vijf recentste gedetecteerde vogelgeluiden. Per tijdstip krijg je de gewone en wetenschappelijke naam van de herkende vogel, met links naar de websites All About Birds en Wikipedia voor meer informatie. Je krijgt ook te zien hoe zeker het algoritme is over de herkenning. Daarnaast krijg je telkens ook de mogelijkheid om het audiofragment te beluisteren. Helemaal onderaan de statuspagina bevindt zich overigens het spectrogram van het geluidsfragment dat BirdNET-Pi op dat moment aan het analyseren is.

Audio-instellingen

Beluister zelf zeker enkele van de audiofragmenten. Merk je dat het geluid nogal zwak is, dan dien je misschien nog wat aan de audio-instellingen aan te passen. Ga daarvoor weer naar de pagina Tools en open Web Terminal. Log in met de gebruikersnaam en het wachtwoord dat je voor je Raspberry Pi hebt ingesteld en typ de volgende opdracht in:

alsamixer -m

Klik nu bovenaan rechts op F6: Select sound card, klik op je usb-apparaat om het te selecteren en druk dan op Enter. Klik dan bovenaan links op F4: Capture om van het afspeel- naar opnameapparaat over te schakelen. Klik op de balk in het midden om het invoerniveau in te stellen of pas het aan met de pijltjestoetsen naar boven en onder. Druk op Esc wanneer je klaar bent en keer terug naar het overzicht. De audiofragmenten zouden nu luider moeten zijn.

Beluister de dag

Als je wilt nakijken welke vogels het systeem vandaag heeft gedetecteerd, klik dan bovenaan op Today’s Detections. Je krijgt dan niet alleen het aantal unieke soorten vandaag te zien, maar ook een spectrogram met bijbehorend geluidsfragment voor elke detectie, inclusief het tijdstip, de herkende soort en hoe zeker de herkenning is. In het zoekveld bovenaan kun je een naam intypen om alleen de resultaten van een specifieke vogelsoort te bekijken.

Klik je bij een opname op het icoontje van het vierkantje met het pijltje dat naar de rechterbovenhoek wijst, dan kom je op een webpagina specifiek voor deze opname. Je kunt de opname bijvoorbeeld opslaan met een rechtsklik op het spectrogram. Ook handig is het slotje bovenaan rechts het spectrogram: klik je hierop om het slot te vergrendelen, dan wordt deze opname bewaard wanneer BirdNET-Pi opnames verwijdert om weer voldoende vrije opslagruimte te krijgen.

BirdNET op je Pi of je smartphone?

Spectrogram en beste opnames

Op de pagina Spectrogram krijg je een live spectrogram te zien van het geluid dat de microfoon momenteel aan het opnemen is: je ziet de frequenties continu voorbij glijden. Ondertussen krijg je ook het geluid zelf te horen. Overigens kun je ook het live geluid op elke andere pagina te horen krijgen als je bovenaan rechts op Live Audio klikt.

De pagina Best Recordings biedt je voor elke gedetecteerde soort de geluidsopname aan waarvan BirdNET-Pi het meest zeker is. Je kunt de lijst alfabetisch sorteren of op het aantal keer dat het geluid gedetecteerd werd. Ook hier kun je weer op het vierkantje met het pijltje klikken om de webpagina van een opname te openen.

Uitgebreide statistieken

Op de pagina Species Stats vraag je in de kleinste details de statistieken op. Standaard worden statistieken getoond van de tien meest voorkomende vogelsoorten vandaag. Je kunt het datumbereik aanpassen, de resolutie en het aantal vogelsoorten. Je kunt ook de uitvoer beperken tot één specifieke vogelsoort, bijvoorbeeld als je wilt weten op welke uren die soort vooral actief is.

Die urenweergave is cirkelvormig, waardoor je eenvoudig op een klok kunt nagaan welke uren het actiefst zijn, of dat nu voor alle vogels of voor de geselecteerde soort is. Selecteer je een soort, dan krijg je rechts ook nog een uitklapmenu waarmee je elke beschikbare opname tevoorschijn kunt halen om te beluisteren. Als je je BirdNET-Pi-installatie overigens al lang hebt draaien, krijg je in de grafiek met resultaten per dag ook de trends te zien door de seizoenen heen.

Dagelijkse statistieken en opnames

Op de pagina Daily Charts kun je per dag opvragen wat de tien meest gedetecteerde en tien minst gedetecteerde vogelsoorten zijn, samen met het aantal detecties per uur, zoals ook getoond op de overzichtspagina. Vooral die tien minst gedetecteerde soorten zijn interessant: hier vind je misschien wat zeldzame soorten tussen. Maar het zou ook een verkeerde detectie kunnen zijn.

Helaas kun je vanuit deze pagina niet rechtstreeks doorklikken naar de ermee overeenkomende geluidsopnames. Daarvoor ga je naar de volgende pagina, Recordings, en kies je daar By Species of By Date. Daar kun je dan de opnames een voor een openen om ze te beluisteren.

Logs

Wil je meer details zien over de herkenning van soorten, open dan de pagina View Log. Hier zie je dat het analysescript elke vijftien seconden wordt opgestart. Na elke periode krijg je te zien welke vogels het script herkent. Maar laat je hier niet te veel door afleiden. Het neurale netwerk zal altijd een resultaat geven, ook al is het daar heel onzeker over.

De waarschijnlijkheidsscore staat in de logs na elke herkenning. Scores onder de 0,1 mag je gerust negeren. Pas bij een score boven de 0,70 mag je ervan uitgaan dat het om een redelijk resultaat gaat. BirdNET-Pi toont ook alleen maar resultaten waarvan de score boven de 70% ligt.

Notificaties

Tot slot kun je in de instellingen ook notificaties instellen, door meer dan zeventig notificatiediensten die ondersteund worden door Apprise, waaronder e-mail, Home Assistant, PushBullet, Signal en Twitter. Op de wiki van Apprise vind je de uitleg over de configuratieregels voor de diverse diensten.

Vul op de pagina Tools / Settings van BirdNET-Pi een of meer configuratieregels voor notificaties in. Je kunt ook de titel en boodschap van de notificatie veranderen, en daarin kun je variabelen gebruiken die worden vervangen door de naam van de vogel en andere parameters. Klik op Send Test Notification om het resultaat eerst eens uit te testen.

Doe mee als burgerwetenschapper

P.S. En vergeet ook het vogelvoer niet!

Grand Theft Auto 6 komt met iedere dag een beetje dichterbij, en terwijl Rockstar Games alles op alles zet om de game op tijd af te krijgen wordt er ook nog altijd toegevoegd aan Grand Theft Auto Online. De game is een gigantische bron van inkomsten voor het bedrijf, en er wordt nog altijd content aan het spel toegevoegd.

Wat is er nieuw deze week? 

Een van de redenen achter het continue succes van GTA Online is de constante stroom aan content die Rockstar Games in het spel pompt. Er zijn iedere week wel events en speciale missies te voltooien, en het bedrijf brengt regelmatig grotere uitbreidingen uit met verhalende missies en nieuwe operaties om vrij te spelen. Voor iedereen die bijvoorbeeld iedere dag zijn social media-feeds ververst voor de nieuwe GTA 6-trailer heeft de game veel te bieden. 

Ook deze week is er weer veel gaande in GTA Online, namelijk: 

©Rockstar Games

Deze week beschikbaar in de Gun Van: 

• Service Carbine (met 50% korting)  

• Military Rifle (met 30% korting voor GTA+-leden)  

• Compact EMP Launcher 

• Sweeper Shotgun 

• Combat PDW 

• Switchblade 

• Proximity Mines 

• Sticky Bombs 

• Tear Gas

Deze voertuigen zijn deze week in de aanbieding:

• Pegassi Zorrusso (Super) – 30% korting

• MTL Dune (Off-Road) – 30% korting

• Nagasaki Outlaw (Off-Road) – 30% korting

• Blimp (Plane) – 30% korting

• Buckingham Shamal (Plane) – 30% korting

• Dinka Veto Modern (Sports) – 30% korting

• Declasse Hotring Sabre (Sports) – 30% korting

• Übermacht Sentinel Classic (Sports) – 30% korting

• Grotti Cheetah (Super) – 30% korting

• Canis Freecrawler (Off-Road) – 30% korting

Verdere beloningen:

De specifieke details van deze week lees je hier.

©Rockstar Games

Recente updates: 

Mansion Raid:Een nieuwe PvP-modus is Mansion Raid, waarin twee teams het tegen elkaar opnemen. Het ene team probeert een Mansion binnen te komen, de kluis te bereiken en te ontsnappen met de buit terwijl het andere team dit probeert te voorkomen. Mansions zijn groot, maar de gangen zijn nauw, dus een vijand kan je om iedere hoek verrassen. 

A Safe House in the Hills: Met deze update is het mogelijk voor spelers om een speciale Mansion aan te schaffen in de rijke buurten van Los Santos. Wie een Mansion koopt krijgt een bekend gezicht te zien: Michael De Santa en zijn vrouw Amanda - uit het verhaal van GTA 5 - introduceren je tot dit rijke leven. Verder is de KnoWay Out-missieketen toegevoegd en is de Rockstar Mission Creator geïntroduceerd, waarmee spelers hun eigen missies kunnen bouwen. 

Hoe werkt GTA Online?

In GTA Online beleef je net als in de meeste GTA-games het leven van een crimineel in een grote stad, die een naam voor zichzelf maakt en - hopelijk - bakken met geld verdient. In tegenstelling tot de meeste GTA-games doe je dit echter in een wereld waar ook andere spelers in rondlopen, met dezelfde doelen als jij. 

De gameplaycyclus bestaat voornamelijk uit het uitvoeren van missies om geld en RP  - ofwel Reputation Points - te verdienen, om langzaam maar zeker toegang te krijgen tot grotere missies en nieuwe businesses. Net als in singleplayer GTA-games zijn er heists uit te voeren die grote bedragen opleveren, maar het is daarbij ook mogelijk een eigen crimineel imperium op te bouwen. Zo koop je locaties waarin dan bijvoorbeeld drugs worden geproduceerd, die je later kunt verkopen. Tijdens het bevoorraden van je locaties en verkopen van je producten is het daarentegen altijd mogelijk dat andere spelers je proberen te dwarsbomen. 

Verder bestaat de GTA Online-ervaring ook uit community-gedreven content, bijvoorbeeld in de vorm van online races die door spelers zijn gemaakt of verschillende roleplay-servers die in recente jaren steeds populairder zijn geworden. Hierin doen spelers alsof ze daadwerkelijk het personage zijn dat ze spelen, waarmee zij dan een gezamenlijk verhaal creëren. 

©Rockstar Games

GTA+ en Shark Cards

GTA Online is een monstersucces gebleken voor Rockstar, met name dankzij de Shark Cards - microtransacties waarvoor spelers echt geld betalen om direct virtuele GTA-dollars op hun in-game bankrekening te storten. Gezien grote bedragen bij elkaar sparen in de game best lang kan duren, betalen genoeg spelers graag voor zo’n ‘buffertje’. Er zijn verschillende soorten Shark Cards beschikbaar: 

Een nieuwe bron van inkomsten is GTA+, een abonnement dat 7,99 euro per maand kost en toegang geeft tot verschillende extra’s in GTA Online en een aantal klassieke Rockstar-games. Het abonnement is beschikbaar op PlayStation 5, Xbox Series X en S en pc.

De voordelen van GTA+ bestaan uit 500.000 in-game dollars, die iedere maand op de virtuele bankrekening worden gestort en toegang tot extra’s via The Vinewood Club. Zo kunnen spelers tot 100 voertuigen opslaan in een exclusieve garage, is er exclusieve korting op geselecteerde items en krijgen zij toegang tot een app op de in-game telefoon waarmee zij hun businesses snel kunnen beheren - in plaats van naar iedere locatie te rijden. Nog meer van de voordelen in GTA Online vind je onderaan deze pagina. 

©Rockstar Games

Daarbij krijgen GTA+-leden iedere maand gratis cosmetics en voertuigen. Tot 4 februari zijn de volgende spullen te claimen als je een abonnement hebt: 

Het abonnement biedt overigens ook iets buiten GTA Online. Op het platform waarop je GTA+ afsluit zijn dan namelijk ook een aantal klassieke Rockstar-games te spelen. Die titels zijn:

• Red Dead Redemption

• Grand Theft Auto: Vice City - The Definitive Edition

• Grand Theft Auto 3 - The Definitive Edition

• Bully 

• L.A. Noire

• Grand Theft Auto: The Trilogy - The Definitive Edition (bevat ook bovenstaande GTA-games, plus de remaster van GTA: San Andreas

• GTA Online (voor wie de game niet apart wil aanschaffen. 

GTA Online na de release van GTA 6

Door de hierboven genoemde Shark Cards en GTA+ blijft GTA Online een ontzettendwaardevolle bron van inkomsten voor Rockstar Games. Veel mensen vragen zich dan ook af wat er met de modus gaat gebeuren wanneer het langverwachte Grand Theft Auto 6 uitkomt. Historisch gezien kregen GTA 4, GTA 5 en Red Dead Redemption 2 namelijk ook een eigen online modus na release.

©Rockstar Games

Hoewel de komst van een onlinemodus voor GTA 6 nog niet is bevestigd, is de verwachting wel dat die er uiteindelijk komt. Wat dat betekent voor de ondersteuning van GTA Online is onbekend, al zei Take-Two's CEO Strauss Zelnick in een interview met IGN het volgende op de vraag of GTA Online wordt afgesloten:

"Ik ga theoretisch spreken, want ik ga het niet hebben over een specifiek project als daar nog geen aankondiging van is gedaan, maar over het algemeen onderhouden we onze projecten wanneer de consumenten nog steeds met die titels bezig zijn."

De spelersaantallen van GTA Online en bijbehorende inkomsten zullen met de release van GTA 6 niet in één klap wegvallen, dus het lijkt logisch dat Rockstar de online-modus nog een tijdlang blijft ondersteunen.

Volgens geruchten zendt Nintendo op donderdag 5 februari een nieuwe Direct-livestream uit. Het zou daarbij om een zogeheten 'Partner Direct' gaan, dus gericht op games van andere uitgevers.

Eerder deze week claimde insider Nate the Hate, die al veelvuldig correct de komst van Direct-uitzendingen heeft voorspeld, al dat er in de eerste week van februari een nieuwe Direct-livestream zou volgen.

Nu claimt hij dat het om een Partner Direct gaat, oftewel een uitzending die draait om spellen van andere bedrijven dan Nintendo zelf. Ook de gamesite VGC claimt dat ze dit hebben vernomen van hun bronnen. Het lijkt dus waarschijnlijk dat dit het geval is, al is op moment van schrijven nog niets officieel bevestigd.

Over Nintendo Direct-uitzendingen

Nintendo zendt verschillende soorten Directs uit via YouTube. De reguliere Nintendo Directs draaien om allerlei soorten games voor Nintendo Switch en Nintendo Switch 2, vaak met een focus op de spellen van het bedrijf zelf, zoals franchises als Mario en Zelda.

Dan zijn er ook nog Partner Directs, die om games van andere bedrijven draaien en geen spellen van Nintendo zelf bevatten. Zo nu en dan toont Nintendo ook Directs gericht op specifieke games of projecten, zoals onlangs nog rondom Tomodachi Life: Waar Dromen Uitkomen en de animatiefilm The Super Mario Galaxy Movie.

Wat zou er in een nieuwe Partner Direct kunnen zitten?

De vorige Partner Direct werd afgelopen juli uitgezonden. Toen kwamen er games als Star Wars outlaws, Octopath Traveler 0 en Final Fantasy Tactics voorbij.

Het is niet bekend wat er in een eventuele nieuwe Partner Direct zou kunnen voorkomen, al zijn al genoeg third-party games bevestigd voor Switch 2, waaronder 007: First Light, The Duskbloods en Elden Ring van FromSoftware, Indiana Jones and the Great Circle en Resident Evil Requiem.

Ook gaan er al geruime tijd geruchten over diverse andere third party-games die mogelijk naar de Switch 2 komen. Onder de games waar geruchten de ronde over doen, vallen Clair Obscur: Expedition 33, Red Read Redemption 2, Final Fantasy 16 en Metaphor: Fantazio.

Wanneer kan de Direct worden aangekondigd?

Zoals gezegd is een nieuwe Nintendo Direct nog niet officieel aangekondigd. Mocht deze echt op 5 februari worden uitgezonden, dan ligt het in de lijn der verwachting dat de Direct bijvoorbeeld op aankomende dinsdag of woensdag wordt bevestigd.