Skip to main content
OpenAIAnthropicGooglePerplexityMetaMicrosoftAmazonCohere
8 AI-crawlers realtime gelogd
AI-bottracking

Elke aanvraag van een AI-crawler, in één live dashboard.

GPTBot. ClaudeBot. PerplexityBot. Google-Extended. Bytespider. Elke aanvraag verschijnt met tijdstempel, URL, status en user-agent — op het moment dat die binnenkomt.

gratis proefperiode · live logs vanaf minuut één

liveYovale AI Bot Tracking
yovale.com/nl/features/ai-bot-tracking
live crawler-feed

Kijk hoe GPTBot je prijzenpagina leest.

De crawler-feed wordt bijgewerkt naarmate aanvragen binnenkomen. Filter op bot, URL of statuscode. Exporteer naar CSV als een stakeholder bewijs nodig heeft.

GPTBot / 24u
1.284+12%
ClaudeBot / 24u
618+18%
PerplexityBot / 24u
402+7%
Google-Extended / 24u
289+4%
recente crawls
live
  • 12:04:22OpenAIGPTBot/pricing200
  • 12:04:18AnthropicClaudeBot/wordpress-hosting200
  • 12:03:55PerplexityPerplexityBot/docs/backups200
  • 12:03:42GoogleGoogle-Extended/200
  • 12:03:11ByteDanceBytespider/features/woocommerce200
8
AI-bots afzonderlijk gevolgd
<1s
logvertraging tot het dashboard
90 dagen
bewaarperiode, per site
het probleem

De meeste hosts verbergen AI-verkeer in ruwe nginx-logs.

×GA4gratislogt geen botverkeer
×Plausible$9/mndsluit bots bewust uit
×nginx access.logSSH vereistgrep, sort, uniq, herhalen

AI-crawlers verschijnen niet in Google Analytics. Niet in Plausible. Niet in Jetpack. Ze verschijnen in /var/log/nginx/access.log, vermengd met elke favicon-aanvraag en elk CSS-bestand.

Tegen de tijd dat je inlogt via SSH en zoekt naar ClaudeBot, is het gesprek voorbij. De crawler is al verder gegaan. Je weet niet welke pagina's hij heeft gelezen of hij 200- of 500-responsen heeft gekregen.

Yovale streamt crawler-aanvragen realtime naar het dashboard. Panelen per bot, uitsplitsingen per URL, statuscodefilters — het soort weergave dat een hostingproduct jaren geleden al had moeten hebben.

mogelijkheden

Crawler-observeerbaarheid, ingebouwd.

Vier bouwstenen die AI-verkeer leesbaar maken. Alle vier zijn inbegrepen in elk Yovale-abonnement.

  • 01
    01
    realtime

    Live aanvraagstroom

    Server-Sent Events sturen elke crawler-aanvraag binnen een seconde naar het dashboard. De pagina blijft open, aanvragen scrollen binnen.

    <1s logvertraging
  • 02
    02
    segmentatie

    Panelen per bot

    Elk van de 8 bekende AI-bots krijgt zijn eigen paneel — aantal aanvragen, top-URL's, statuscodedistributie, user-agent-string.

    8 toegewijde panelen
  • 03
    03
    detailanalyse

    Bot-weergave per URL

    Open een willekeurige URL en zie welke AI-bots die hebben gelezen, wanneer en wat ze terugkregen. Handig om 404's te vinden die alleen crawlers raken.

    uitsplitsing per URL
  • 04
    04
    ops

    CSV-export en webhooks

    Stuur aanvragen naar een webhook voor downstream dashboards, of exporteer 90 dagen ruwe events naar CSV als een SEO-team erom vraagt.

    webhook + CSV
vergelijking

Zo ziet echte AI-botvisibiliteit eruit.

Analytics / SaaS-tools

Botverkeer vastgelegd
standaard uitgesloten
Vertraging tot weergave
5-10 min gebatcht
Uitsplitsing per URL
alleen geaggregeerd
Zichtbaarheid statuscodes
niet beschikbaar
Bewaarperiode
afhankelijk van abonnement
Kosten
$9-$200/mnd extra
Resultaatblind voor AI

Yovale ingebouwd

Botverkeer vastgelegd
8 bots afzonderlijk gevolgd
Vertraging tot weergave
<1 seconde SSE-stream
Uitsplitsing per URL
URL-niveau, per bot
Zichtbaarheid statuscodes
200, 301, 404, 5xx gefilterd
Bewaarperiode
90 dagen op elk niveau
Kosten
inbegrepen bij hosting
Resultaatlive en gelabeld

bottracking-stack · hoe het werkt

Van nginx-logregel naar dashboardpaneel.

Crawler-aanvragen worden aan de edge geparsed, geclassificeerd op user-agent, ontdubbeld en via een Server-Sent Events-stream naar je dashboard gepusht. Niets te installeren, niets te onderhouden.

Vastleggen
Classificeren
Streamen
1
logstroom
Vastleggen
nginx + logparser

Elke aanvraag belandt in het nginx-toegangslog. Een sidecar-parser leest de staart, classificeert bot-user-agents en markeert AI-crawlers met een canonieke naam.

8
bots bekend
Classificeren
user-agent-register

8 bekende AI-bots worden herkend op exacte UA-string. Onbekende bots blijven onder 'other AI' totdat we ondersteuning toevoegen. Valse positieven zijn zeldzaam.

<1s
logvertraging
Streamen
SSE → dashboard

Geclassificeerde aanvragen stromen via Server-Sent Events naar het dashboard. De pagina blijft open, aanvragen scrollen binnen, grafieken worden herladen. Geen polling, geen verversing.

live in dashboard
prijzen

Inbegrepen bij hosting, niet apart verkocht.

Bottracking zit niet achter een hoger abonnement. Starter, Growth, Business — alle drie zien elke AI-crawler-aanvraag, altijd.

$149
/jaar

Starter, 2 sites, volledig crawler-dashboard op beide. Alleen jaarlijks.

8 AI-bots gevolgd<1s logvertraging90 dagen bewaarperiodeUitsplitsing per URLCSV-exportWebhooklevering
Gratis proberen
vragen

Wat kopers vragen voordat ze het botdashboard vertrouwen.

Welke AI-bots worden gevolgd?+

GPTBot, ChatGPT-User, ClaudeBot, anthropic-ai, PerplexityBot, Google-Extended, Meta-ExternalAgent, Bytespider, Amazonbot en Applebot-Extended. Onbekende bots blijven onder 'other AI' totdat we expliciete ondersteuning toevoegen.

Vertraagt tracking mijn site?+

Nee. We parsen de staart van het nginx-toegangslog in een sidecar-proces. Het webaanvraagpad blijft onaangeroerd — zelfde nginx, zelfde PHP-FPM, zelfde responstijden.

Werkt dit achter Cloudflare?+

Ja. Cloudflare geeft de echte user-agent door. We classificeren op de origin, zodat zelfs bots die aan de edge zijn gecached verschijnen wanneer ze revalideren.

Kan ik aanvragen voor een specifieke URL bekijken?+

Ja. Klik op een URL in het dashboard en je krijgt een chronologische lijst van bot-aanvragen, met botnaam, statuscode en responstijd.

Is er een API?+

Webhook-uitgang voor nieuwe aanvragen, REST-eindpunt voor historische queries. Beide geverifieerd met een per-site-token. CSV-export dekt het no-code geval.

Hoe lang worden gegevens bewaard?+

90 dagen, op elk abonnementsniveau. CSV-export beschikbaar op elk moment binnen dat tijdvenster.

afsluiting

Stop met gissen of AI je site leest.

Verplaats een site in zeven minuten. Tegen de tijd dat je koffie klaar is, heeft het crawler-dashboard zijn eerste echte datapunten.

Gratis proberen
gratis proefperiode · live logs vanaf minuut één