Prompttrackers: de duurste manier om niets te weten te komen

Om de paar maanden duikt er een nieuwe hype op die belooft marketing voorgoed te veranderen.
Deze keer gaat het om prompttrackers — tools die laten zien hoe vaak je merk verschijnt in antwoorden van ChatGPT, Claude of Perplexity.

Klinkt goed in het begin. Wie zou dat niet willen weten?

Het probleem is dat de techniek achter deze tools fundamenteel tekortschiet, tenminste als je de gegevens serieus wilt gebruiken om beslissingen te nemen.

Waarom prompt trackers niet werken

Laten we beginnen met het meest voor de hand liggende probleem:
AI is niet-deterministisch.

Kort gezegd: stel ChatGPT twee keer dezelfde vraag en je krijgt niet automatisch hetzelfde antwoord. Soms veranderen alleen de nuances, soms ligt de nadruk totaal anders.

Dit is een nachtmerrie voor statistici.
Om enigszins betrouwbare conclusies te trekken, zou je elke prompt vaak moeten herhalen: niet één of vijf keer, maar tientallen of honderden keren, afhankelijk van de gewenste nauwkeurigheid.

In de praktijk betekent dit
Al een paar honderd tests met dezelfde prompt kunnen tientallen tot honderden euro’s kosten. Per prompt en per model.

Volg je 30, 40 of 50 prompts op meerdere modellen, dan kunnen de maandelijkse kosten oplopen tot vijf cijfers, terwijl de uitkomsten sterk blijven schommelen.

API is niet hetzelfde als ChatGPT

De meeste prompttrackers gebruiken API’s van OpenAI, Anthropic of andere aanbieders. Daarmee kun je vragen automatisch testen, maar de resultaten hoeven niet overeen te komen met wat gebruikers in de webinterfaces zien.

Alleen:
De API is niet wat gebruikers zien op ChatGPT.com.

De webinterface gebruikt eigen systeemprompts, interne tools, extra context en aansturing die regelmatig verandert. Geen van deze lagen is van buitenaf zichtbaar of reproduceerbaar.

Wat betekent dat concreet?
Een prompttracker meet dus antwoorden uit een technische omgeving die fundamenteel verschilt van de echte gebruikerservaring.

Of om het anders te zeggen:
Je analyseert gegevens uit een parallel universum en vraagt je af waarom ze niet overeenkomen met de werkelijkheid.

Het query-fan-outprobleem

Een ander punt dat zelden wordt besproken:

Bij complexe vragen hoeft een AI-systeem niet één zoekopdracht uit te voeren. Afhankelijk van het model, de prompt en de context kan het de vraag opsplitsen, herformuleren en verschillende verwante zoekopdrachten gebruiken.

Van
„Wat zijn de beste draadloze hoofdtelefoons onder 200 euro?“
kan een AI-systeem meerdere verwante zoekopdrachten afleiden, zoals:

• „Draadloze hoofdtelefoons onder 200 euro“
• „Bluetooth-hoofdtelefoontest“
• „Hoofdtelefoon vergelijken“

Je volgt dus een prompt die in deze vorm misschien nooit de werkelijke basis voor het antwoord is.
De AI volgt zijn eigen proces, terwijl je tracker iets anders meet.

Wat werkt in plaats daarvan

In plaats van te gissen wat modellen doen, kun je concrete resultaten meten.

• Waar verkeer vanuit AI-platforms werkelijk vandaan komt
• Wat deze bezoekers doen op de site
• Naar welke inhoud AI-platforms het vaakst verwijzen
• Hoe het aandeel verkeer vanuit AI-platforms verandert

Het goede nieuws:
Er zijn gegevens die echt gemeten kunnen worden. Zonder schattingen. Zonder interpretatie.

AI-verwijzingsverkeer

Als iemand via een link in ChatGPT, Perplexity of een ander AI-platform op je website terechtkomt, is dat een echt en meetbaar bezoek.
Geen simulatie, maar een echt bezoek.

En dit is waar het interessant wordt als je dieper kijkt.

Uitsplitsing per AI-bron

Niet elke AI werkt hetzelfde:

• ChatGPT gebruikt voornamelijk Bing
• Claude gebruikt Brave
• Perplexity gebruikt zijn eigen zoeklogica

Afhankelijk van waar je inhoud gemakkelijk te vinden is, komen bezoekers uit heel verschillende AI-ecosystemen.

Als je die bronnen apart bekijkt, kun je een belangrijke vraag beantwoorden:
Welk AI-platform levert waardevol verkeer op, en welk platform nauwelijks?

Conversietracking per AI-bron

Verkeer op zichzelf zegt nog niet genoeg.
Maar de cruciale vraag is: wat gebeurt er daarna?

• Kopen deze bezoekers?
• Schrijven ze zich in?
• Lezen ze verder of gaan ze meteen weer weg?

Als bezoekers uit één AI-bron duidelijk beter converteren dan andere, is dat geen onderbuikgevoel maar een concreet signaal waar investeren kan lonen.

Landingspagina-analyse

Naar welke inhoud verwijzen AI-platforms?

Als gidsen regelmatig bezoekers vanuit AI-platforms trekken en productpagina’s nauwelijks, is dat waarschijnlijk geen toeval.
Dat laat zien welke soorten inhoud zulke bezoeken aantrekken en welke niet.

Het aandeel verkeer vanuit AI-platforms in de tijd

Een eenvoudig maar onderschat punt:

Hoe verandert het aandeel verkeer vanuit AI-platforms van week tot week en van maand tot maand?

Neemt het gestaag toe?
Stagneert het?
Of daalt het plotseling?

Zulke verschuivingen kunnen vroege signalen zijn.
Daalt het aandeel AI-verkeer op jouw site terwijl het elders groeit, dan is dat een reden om verder te kijken.

Het aandeel verkeer vanuit AI-platforms in de tijd

Een eenvoudig maar onderschat punt:

Hoe verandert het aandeel verkeer vanuit AI-platforms van week tot week en van maand tot maand?

Neemt het gestaag toe?
Stagneert het?
Of daalt het plotseling?

Zulke verschuivingen kunnen vroege signalen zijn.
Daalt het aandeel AI-verkeer op jouw site terwijl het elders groeit, dan is dat een reden om verder te kijken.

Conclusie

Prompttrackers verkopen een gevoel van controle. Dashboards bewegen, cijfers veranderen en alles lijkt meetbaar. Onder de motorkap is het echter vooral ruis: duur om te verzamelen en lastig te interpreteren.

Deze tools kunnen nuttig zijn voor experimenten, maar vormen geen solide basis voor zakelijke beslissingen.

Wat we al doen bij Trackboxx

Bij Trackboxx richten we ons op AI-referraltracking. Minder spectaculair, maar wel gebaseerd op echte bezoeken.

Je ziet welk AI-platform verkeer stuurt — ChatGPT, Claude, Perplexity of Gemini —, naar welke pagina’s wordt gelinkt en welke bezoeken converteren.

Echte bezoekers. Echte gegevens. Geen schattingen.

Volledig cookieloos en AVG-conform, zonder dat je er maandelijks duizenden euro’s aan kwijt bent.