Overzicht van de Academy
Hoofdstuk 04

Meten en bewijzen

Het lastige aan AI-zichtbaarheid meten is dat een taalmodel op dezelfde vraag niet altijd hetzelfde antwoord geeft. Stel dezelfde vraag drie keer aan ChatGPT en je krijgt drie keer een iets andere lijst met bedrijven. Eén meting zegt daarom niets. Wat wel iets zegt is een kans, gemeten over een set vragen, herhaald over meerdere dagen en over meerdere modellen.

Dat is meteen de reden dat een screenshot van een gunstig antwoord geen bewijs is. Het is een steekproef van één, uit een verdeling die je niet kent.

Wat je minimaal nodig hebt voor een uitspraak

  • Genoeg vragen. Eén vraag meet die ene vraag. Je wilt de koopvragen die je klanten echt stellen, niet de vraag waar je toevallig goed op staat. Zie hoeveel prompts heb je nodig.
  • Herhaling. Dezelfde vraag op meerdere dagen, zodat je de spreiding ziet in plaats van één toevallige uitkomst.
  • Meerdere modellen. ChatGPT citeert gemiddeld ongeveer vijftien bronnen per antwoord en Gemini ongeveer drie. Een gemiddelde over die twee verbergt meer dan het toont.
  • Een bandbreedte in plaats van een cijfer achter de komma. Een score van 42,7 procent suggereert precisie die er niet is. Zie bandbreedtes lezen.

Waar het meestal misgaat

Drie fouten kom ik het vaakst tegen. De eerste is meten op je merknaam, want daar kom je bijna altijd goed uit en het zegt niets over de vraag of een nieuwe klant je vindt. De tweede is één keer meten en dat als nulmeting gebruiken zonder de spreiding te kennen. De derde is de meting verwarren met het werk: een dashboard vertelt je dat je zichtbaarheid daalde, en niet waarom. Die reden is meestal een concurrent die genoemd wordt in een antwoord waar jij ontbreekt, en dat zoek je uit tot op de bron.

Wat je in Search Console wel en niet ziet

Verkeer uit AI-antwoorden is maar deels te herleiden. Google rapporteert klikken uit AI Overviews binnen de gewone Search Console-cijfers zonder ze apart te tonen, en verwijzingen uit ChatGPT of Perplexity komen als gewone verwijzende sites binnen. Zie Search Console en AI-verkeer en waar AI-citaties vandaan komen.

Wil je dit een keer goed laten meten zonder het zelf op te zetten, dan is dat de AI-zichtbaarheidsaudit.

De acht lessen in dit hoofdstuk

Wil je weten welke cijfers je wel en niet in een rapportage zet, begin dan bij SEO-rapportage: welke cijfers iets zeggen. Gaat het je om de meetmethode zelf, begin dan bij AI-zichtbaarheid meten.

Hieronder staan ze, van de meetmethode zelf tot het lezen van de uitkomst.

  1. SEO-rapportage: welke cijfers iets zeggen Een SEO-rapportage die iets zegt begint bij een meting die je kunt herhalen, want een taalmodel geeft op dezelfde vraag lang niet altijd hetzelfde…
  2. Je AI-zichtbaarheid volgen Je AI-zichtbaarheid volgen betekent dat je met een vaste cadans dezelfde vragen aan dezelfde modellen stelt en bijhoudt hoe vaak je merk in de…
  3. AI-zichtbaarheid meten AI-zichtbaarheid meet je door een vaste set vragen herhaald aan meerdere taalmodellen te stellen en per antwoord vast te leggen of je merk genoemd…
  4. Waarom één AI-antwoord niets bewijst Eén AI-antwoord bewijst vrijwel niets over je zichtbaarheid, omdat hetzelfde model op dezelfde vraag de volgende keer een andere merkenlijst geeft. Dat hoort bij…
  5. Hoeveel prompts heb je nodig Voor een meting die je kunt verdedigen heb je minimaal vijftig prompts nodig, met honderd tot tweehonderd als het punt waarop de cijfers echt…
  6. Bandbreedtes lezen in plaats van puntscores Een bandbreedte lees je als de reeks waarden waarbinnen je werkelijke AI-zichtbaarheid waarschijnlijk ligt, met het gemeten getal als de meest waarschijnlijke waarde daarbinnen.…
  7. Waar AI-citaties vandaan komen AI-citaties komen overwegend van andermans websites: tussen de 82 en 89 procent van alle citaties in AI-antwoorden komt uit earned media, dus uit journalistiek,…
  8. Search Console en AI-verkeer Search Console laat je AI-verkeer maar gedeeltelijk zien, want kliks uit Google AI Overviews staan er samen met de gewone zoekresultaten in en verwijzingen…