GeoGuessr AI: kan een machine de beste spelers verslaan?

Op 11 mei 2023 plaatste Trevor Rainbolt, een van de bekendste professionele GeoGuessr-spelers, een video met de titel world’s best ai vs geoguessr pro. Hij verloor alle zes spellen. Zijn tegenstander was PIGEON, een onderzoeksmodel van Stanford dat het spel uitsluitend uit Street View-beelden had geleerd.

“We waren niet de eerste AI die tegen Rainbolt speelde”, zei een van de makers, Silas Alberti, tegen NPR. “We zijn alleen de eerste AI die van Rainbolt won.” Drie jaar later staat vast dat AI GeoGuessr kan winnen. De nuttige vragen zijn hoe GeoGuessr AI een scène leest, waar een mens nog het voordeel heeft, wat de regels toestaan, en hoe je dezelfde technologie in de praktijk gebruikt in plaats van als verbod.

PIGEON is gebouwd door Lukas Haas, Michal Skreta, Silas Alberti en Chelsea Finn. Het begon als cursusproject in de cursus CS 330 van Stanford, verscheen in juli 2023 op arXiv en werd gepresenteerd op CVPR 2024, een van de belangrijkste conferenties voor computervisie.

Het live-experiment maakte er meer van dan een benchmarkscore. Een Chrome-extensie nam in elk van de vier windrichtingen een screenshot, stuurde de beelden naar het model en plaatste de gok. Over 458 wedstrijden in Competitive Duels versloeg het spelers van elk niveau. De auteurs bouwden zelfs een optionele willekeurige vertraging in vóór elke gok, om het gedrag “menselijker te laten lijken”.

Lees de mediaan en het gemiddelde samen. De helft van de gissingen viel binnen ongeveer 44 km, maar de gemiddelde misser was 252 km: meer dan één gissing op twintig zat meer dan 750 km ernaast, en die missers trekken het gemiddelde omhoog. De auteurs zijn ook eerlijk over het plafond: de huidige systemen, het hunne inbegrepen, kunnen betrouwbaar nog geen voorspellingen op straatniveau doen.

Ook algemene AI heeft zich sindsdien aangesloten. In april 2025 speelde Sam Patterson, een speler met de rang Master I, vijf No Move-rondes tegen o3 van OpenAI, waarbij het model per ronde slechts twee screenshots van 90 graden kreeg. o3 won met 23.179 tegen 22.054 en noemde alle vijf de landen correct. In dezelfde maand ging een “GeoGuessr-prompt” van 1.100 woorden voor o3 viral, al liet een test uit 2026 op 200 foto’s zien dat die niet beter presteerde dan een korte.

Het gepubliceerde model is getraind op 400.000 beelden: vier weergaven van elk van 100.000 willekeurige GeoGuessr-locaties. Hier is de hele pijplijn, stap voor stap, zonder de wiskunde.

1. Step 1Zet het beeld om in getallenPIGEON neemt vier beelden, elk 90 graden uit elkaar, die samen het volledige beeld van 360 graden bestrijken. OpenAI’s CLIP, een model dat eerst is getraind om afbeeldingen met tekst te koppelen, zet elk beeld om in een embedding, en de vier worden gemiddeld tot één samenvatting van de plek.
2. Step 2Leer geografie uit bijschriftenVóór de hoofdtraining bestudeerde het model afbeeldingen met gegenereerde bijschriften zoals “Op deze locatie rijden mensen aan de linkerkant van de weg” en “Deze locatie heeft een gematigd zeeklimaat”. De bijschriften duwen het naar kenmerken die voor de locatie ertoe doen.
3. Step 3Kies een geocel, geen coördinaatIn plaats van direct breedte- en lengtegraad te voorspellen, sorteert PIGEON de scène in een van de 2.203 geocellen. Die volgen echte bestuurlijke grenzen, samengevoegd tot elke cel genoeg trainingsvoorbeelden heeft, en te grote cellen zijn gesplitst met clustering.
4. Step 4Straf verre missers zwaarderTijdens de training krijgt een cel naast de juiste gedeeltelijk punten, gewogen naar afstand. Het model leert dat een gok die er dichtbij zit beter is dan een verre, dezelfde logica als de scoring van GeoGuessr.
5. Step 5Verfijn binnen de beste kandidatenTen slotte neemt het zijn vijf meest waarschijnlijke geocellen, vergelijkt de scène met clusters van trainingslocaties daarbinnen, en verplaatst de speld naar de dichtstbijzijnde match. De auteurs noemen deze ophaalstap een primeur voor het vakgebied.

Niemand vertelde het model wat een paaltje is. De auteurs ontdekten dat het toch “strategieën leerde die in online GeoGuessr-gidsen worden onderwezen”, en lette op begroeiing, wegmarkeringen, elektriciteitspalen en bewegwijzering. Dat zijn dezelfde aanwijzingscategorieën als in een menselijke checklist met landaanwijzingen. Voor gewone foto’s in plaats van panorama’s geldt de redenering uit onze uitleg over AI-geolocatie.

• Beslistijd. Patterson gokte meestal binnen een minuut of twee, vaak binnen 10 seconden. o3 had bijna altijd meer dan 2 minuten nodig, en soms meer dan 6. In Duels kan de gok van één speler de ander maar 15 seconden laten, dus minuten nadenken is een echte handicap.
• Weten wat ertoe doet. Zijn oordeel was dat een mens er heel goed in is te weten wat ertoe doet, terwijl het model veel onnodig, repetitief bijsnijden deed en “meerdere keren werd afgeleid door reclame”.
• Bewegen voor een betere aanwijzing. De bot van PIGEON beoordeelde vier vaste beelden. Zijn menselijke tegenstanders konden ook door de scène bewegen, wat hun volgens het artikel zelf meer informatie gaf om een gok te verfijnen.

Haal er niet te veel uit. Na ongeveer 20 testrondes beoordeelde Patterson o3 als vergelijkbaar met spelers van Master I of hoger. De menselijke voorsprong gaat over hoe het spel wordt gespeeld, niet over meer weten.

Patterson houdt een kaartenbak bij met honderden items over wegmarkeringen, elektriciteitspalen, paaltjes en kentekenplaten, en hij verwoordde het verschil botweg: “Deze modellen hebben meer dan een individueel brein ooit zou kunnen onthouden.” Dat is het echte voordeel. Een mens moet zich specialiseren; een model hoeft dat niet.

De zwakke punten zijn voorspelbaar. PIGEON leerde alleen van GeoGuessr-locaties, dus het heeft nooit de plekken gezien die Street View niet dekt. De auteurs noemen ook tunnels, water, donkere scènes en bossen als de moeilijkste beelden, en zijn nauwkeurigheid daalt naarmate de bevolkingsdichtheid afneemt.

Die formulering dekt beide soorten AI. Een bot die voor je speelt is software van derden. Een chatbot waarin je een screenshot plakt, is een externe informatiebron. De Community Rules noemen drie straffen wanneer er bewijs van vals spelen is:

• Ranglijstverbod: verwijderd van de officiële ranglijsten voor singleplayer en er voortaan buiten gehouden.
• Competitieve schorsing: geblokkeerd van de officiële ranglijsten in competitieve en singleplayer-spellen.
• Competitief verbod: permanent geblokkeerd van competitief spel en verwijderd van de officiële ranglijsten.

Je kunt ook virtuele items verliezen, en actie kan zich uitstrekken tot elk account dat je bezit. De Servicevoorwaarden verbieden daarnaast automatische programma’s en scripts, met bots uitdrukkelijk genoemd, en laten een tijdelijke schorsing of een permanente uitsluiting toe. Een geschorste of verbannen speler heeft geen recht op terugbetaling.

En hoe zit het met het PIGEON-experiment zelf? Het liep met hulp van binnenuit GeoGuessr: het artikel bedankt de technisch directeur van het bedrijf voor het faciliteren van de live spellen tegen menselijke spelers. Wat het experiment van vals spelen onderscheidde, was de betrokkenheid van GeoGuessr, niet de software.

1. Step 1Speel de ronde schoonGeen tweede tabblad, geen assistent, geen screenshot naar een chatbot. De ronde meet wat je zelf kunt lezen, en dat is het enige dat de moeite waard is om te meten.
2. Step 2Benoem je doorslaggevende aanwijzingZeg, voordat je de speld plaatst, welk enkel bewijs je het meest vertrouwt. Dat maakt een onderbuikgevoel tot een claim die je achteraf kunt controleren.
3. Step 3Zoek de aanwijzing die je misteZoek na de onthulling naar het detail dat de ronde had moeten beslissen. Onze oefenroutine geeft de volgorde waarin je dingen moet nalopen.
4. Step 4Vraag naar de aanwijzing, niet naar de rondeEen vraag als “hoe verschillen Tsjechische en Slowaakse wegpalen?” leert je iets dat je opnieuw kunt gebruiken. Behandel het antwoord als een aanwijzing om te verifiëren: Patterson vond de beschrijvingen van borden en wegmarkeringen door o3 meestal, niet altijd, juist.
5. Step 5Test de vaardigheid op echte foto’sGok waar een van je eigen foto’s is genomen, en vergelijk daarna met een AI-schatting van GeoSpy. Het leest GPS-gegevens wanneer een bestand ze nog bevat, dus verwijder eerst de locatie, anders bewijst de test niets.

De laatste stap is belangrijk, omdat het spel en echte foto’s hetzelfde oog trainen. Wat je van een panorama leert, is wat het vinden van de locatie van een foto zonder metadata nodig heeft.