Waarom geeft AI elke keer een ander antwoord?

AI geeft elke keer een ander antwoord omdat taalmodellen hun tekst woord voor woord opbouwen met een vorm van kans. Daarnaast spelen het gekozen model, of zoeken aan of uit staat, je locatie, je taal en de precieze formulering van je vraag mee. Daarom zegt één losse vraag weinig: je krijgt pas een betrouwbaar beeld als je meet over meerdere vragen en meerdere weken.

Ingebouwde variatie

Een taalmodel kiest bij elk volgend woord uit meerdere mogelijke woorden. Meestal neemt het een waarschijnlijke keuze, maar niet altijd dezelfde. Zo ontstaan bij dezelfde vraag net andere zinnen, een andere volgorde of een ander lijstje bedrijven.

Dat is geen fout. Het maakt antwoorden natuurlijker. Maar het betekent wel dat een bakkerij in Leiden de ene keer bovenaan staat en de volgende keer op plek vier, of helemaal niet.

Welk model je gebruikt

ChatGPT, Gemini, Perplexity en Claude werken met verschillende modellen. Ook binnen één assistent zijn er vaak meerdere versies, bijvoorbeeld een snel model en een uitgebreider model. Ze zijn op andere data getraind en maken andere keuzes. Aanbieders werken hun modellen bovendien regelmatig bij. Een antwoord van vandaag kan dus anders zijn dan een antwoord van een paar maanden geleden.

Zoeken aan of uit

Sommige antwoorden komen alleen uit wat het model tijdens de training heeft geleerd. Andere antwoorden gebruiken live zoekresultaten van het web. Perplexity zoekt bijna altijd. Bij ChatGPT en andere assistenten hangt het af van de vraag en de instellingen.

Met zoeken aan kan een nieuwe pagina op je site of een recente review al snel invloed hebben. Zonder zoeken leunt het model op oudere kennis. Daardoor kan het verschil tussen twee antwoorden groot zijn.

Locatie en taal

Vraag je "beste loodgieter bij mij in de buurt", dan gebruikt een assistent soms je locatie of je IP-adres. Iemand in Rotterdam krijgt dan andere namen dan iemand in Groningen.

Taal telt ook mee. Een vraag in het Nederlands levert vaak andere bronnen op dan dezelfde vraag in het Engels. Bedient je bedrijf ook expats of internationale klanten, dan is het slim om beide talen te bekijken.

De formulering van de vraag

Kleine verschillen in een vraag geven soms andere antwoorden. Vergelijk:

• "Welke fysiotherapeut in Amersfoort is goed?"
• "Ik heb last van mijn knie, waar kan ik in Amersfoort terecht?"
• "Fysiotherapie Amersfoort sportblessure"

Alle drie gaan over hetzelfde, maar een AI-assistent kan bij elke vraag andere praktijken noemen. Ook eerdere berichten in hetzelfde gesprek en eventuele persoonlijke instellingen kunnen het antwoord kleuren.

Wat dit betekent voor meten

Omdat antwoorden zo wisselen, heb je weinig aan één screenshot. Een goede meting houdt rekening met de variatie:

1. Meet meerdere vragen die je klanten echt stellen, niet één.
2. Gebruik verschillende formuleringen voor hetzelfde onderwerp.
3. Bekijk meerdere AI-assistenten.
4. Herhaal de meting elke week op een vaste manier.
5. Kijk naar de trend over weken, niet naar één uitschieter.

Welke vragen je het beste kunt kiezen, lees je in welke vragen stellen je klanten aan AI. Een uitgebreidere uitleg over meten vind je in zo meet je of AI je bedrijf noemt.

Hoe wij hiermee omgaan

Bij HelloGeoLabs stellen we dezelfde set vragen op een vaste manier aan ChatGPT, Gemini, Perplexity en Claude. Zo kun je de resultaten van week tot week vergelijken. Je ziet hoe vaak je genoemd wordt, op welke positie en welke concurrenten verschijnen. Hoe dat precies werkt, staat op de pagina hoe we meten.

Wil je de variatie niet zelf bijhouden? Met GEO tracking krijg je na elke meting een overzichtelijk rapport in je mailbox, zodat je ziet of je zichtbaarheid echt verbetert.