Meer inzicht én een website die beter leesbaar is voor LLM’s
AI-bots zoals GPTBot, Claude en Perplexity crawlen websites om antwoorden te kunnen geven, te citeren of context op te bouwen. Dat is op zich niet “goed” of “slecht”, maar het is wél handig om te weten wat er precies gebeurt.
Daarom heb ik AI Bot Tracker ontwikkeld: een WordPress-plugin die AI-bots detecteert, hun bezoeken logt én je site extra context meegeeft via LLM-vriendelijke bestanden.
Wat doet de plugin precies?
- Detecteert AI-bots op basis van User-Agent (o.a. GPTBot, ClaudeBot, PerplexityBot, Google-Extended, Bingbot, …)
- Logt elk bezoek in een eigen tabel (botnaam, URL, datum/tijd)
- Geeft een duidelijk dashboard met: totaal aantal bezoeken (7/30/90 dagen), bezoeken per bot, meest bezochte pagina’s, recente bezoeken
- CSV-export om snel te rapporteren
En het belangrijkste: de plugin helpt je website ook beter interpreteerbaar te maken voor LLM’s via:
- /llms.txt:
een simpele, stabiele tekstpagina met identiteit, belangrijke pagina’s en richtlijnen - /site-data.json:
machine-leesbare context over je organisatie, aanbod, belangrijke pagina’s en beperkingen - JSON-LD in de <head>:
Organization + WebSite schema (zonder rommel, lege velden worden weggelaten)
Geen gedoe met robots.txt en niets wordt automatisch geblokkeerd: het gaat vooral om meten, inzicht en duidelijke context.
