Skip to main content
OpenAIAnthropicGooglePerplexityMetaMicrosoftAmazonCohere
8 KI-Crawler in Echtzeit protokolliert
KI-Bot-Tracking

Jeder KI-Crawler-Aufruf, in einem Live-Dashboard.

GPTBot. ClaudeBot. PerplexityBot. Google-Extended. Bytespider. Jeder Aufruf erscheint mit Zeitstempel, URL, Status und User-Agent — in dem Moment, in dem er eintrifft.

Testphase · Live-Protokolle ab Minute eins

liveYovale AI Bot Tracking
yovale.com/de/features/ai-bot-tracking
Live-Crawler-Feed

GPTBot beim Lesen deiner Preisseite beobachten.

Der Crawler-Feed aktualisiert sich, sobald Aufrufe eingehen. Nach Bot, URL oder Statuscode filtern. Als CSV exportieren, wenn ein Stakeholder einen Nachweis benötigt.

GPTBot / 24h
1.284+12%
ClaudeBot / 24h
618+18%
PerplexityBot / 24h
402+7%
Google-Extended / 24h
289+4%
aktuelle Crawls
live
  • 12:04:22OpenAIGPTBot/pricing200
  • 12:04:18AnthropicClaudeBot/wordpress-hosting200
  • 12:03:55PerplexityPerplexityBot/docs/backups200
  • 12:03:42GoogleGoogle-Extended/200
  • 12:03:11ByteDanceBytespider/features/woocommerce200
8
KI-Bots einzeln verfolgt
<1s
Protokollverzögerung bis zum Dashboard
90 Tage
Speicherdauer, pro Website
das Problem

Die meisten Hoster verstecken KI-Traffic in rohen nginx-Logs.

×GA4kostenlosprotokolliert keinen Bot-Traffic
×Plausible$9/Monatschließt Bots bewusst aus
×nginx access.logSSH erforderlichgrep, sort, uniq, wiederholen

KI-Crawler tauchen nicht in Google Analytics auf. Nicht in Plausible. Nicht in Jetpack. Sie tauchen in /var/log/nginx/access.log auf, vermischt mit jedem Favicon-Request und CSS-Asset.

Bis du dich per SSH einloggst und nach ClaudeBot greppst, ist das Gespräch vorbei. Der Crawler ist weiter gezogen. Du weißt nicht, welche Seiten er gelesen hat oder ob er 200er oder 500er bekommen hat.

Yovale streamt Crawler-Aufrufe in Echtzeit ins Dashboard. Bot-eigene Panels, URL-Aufschlüsselungen, Statuscode-Filter — die Art von Ansicht, die ein Hosting-Produkt schon vor Jahren hätte liefern sollen.

Funktionen

Crawler-Observability, eingebaut.

Vier Grundbausteine, die KI-Traffic lesbar machen. Alle vier in jedem Yovale-Plan enthalten.

  • 01
    01
    Echtzeit

    Live-Trefferstream

    Server-Sent Events senden jeden Crawler-Aufruf innerhalb einer Sekunde ans Dashboard. Die Seite bleibt offen, Treffer scrollen herein.

    <1s Protokollverzögerung
  • 02
    02
    Segmentierung

    Bot-eigene Panels

    Jeder der 8 bekannten KI-Bots erhält sein eigenes Panel — Trefferanzahl, Top-URLs, Statuscode-Verteilung, User-Agent-String.

    8 dedizierte Panels
  • 03
    03
    Detailanalyse

    URL-Bot-Ansicht

    Öffne eine beliebige URL und sieh, welche KI-Bots sie gelesen haben, wann und was sie zurückbekommen haben. Hilfreich, um 404s zu finden, die nur Crawler treffen.

    URL-Aufschlüsselung
  • 04
    04
    Ops

    CSV-Export und Webhooks

    Treffer per Webhook an nachgelagerte Dashboards weiterleiten oder 90 Tage Rohdaten als CSV exportieren, wenn das SEO-Team es anfordert.

    Webhook + CSV
direkter Vergleich

So sieht echte KI-Bot-Transparenz aus.

Analytics / SaaS-Tools

Bot-Traffic erfasst
standardmäßig ausgeschlossen
Verzögerung bis zur Ansicht
5–10 Min. gebündelt
URL-Aufschlüsselung
nur aggregiert
Statuscode-Sichtbarkeit
nicht vorhanden
Speicherdauer
je nach Plan
Kosten
$9–$200/Monat extra
Ergebnisblind für KI

Yovale integriert

Bot-Traffic erfasst
8 Bots einzeln verfolgt
Verzögerung bis zur Ansicht
<1 Sekunde SSE-Stream
URL-Aufschlüsselung
URL-Ebene, pro Bot
Statuscode-Sichtbarkeit
200, 301, 404, 5xx gefiltert
Speicherdauer
90 Tage in jedem Tarif
Kosten
im Hosting enthalten
Ergebnislive und beschriftet

Bot-Tracking-Stack · so funktioniert es

Von der nginx-Protokollzeile zum Dashboard-Panel.

Crawler-Aufrufe werden am Edge geparst, nach User-Agent klassifiziert, dedupliziert und per Server-Sent-Events-Stream ans Dashboard gepusht. Nichts zu installieren, nichts zu warten.

Erfassen
Klassifizieren
Streamen
1
Log-Stream
Erfassen
nginx + Log-Parser

Jede Anfrage landet im nginx-Zugriffsprotokoll. Ein Sidecar-Parser liest das Ende, klassifiziert Bot-User-Agents und versieht KI-Crawler mit einem kanonischen Namen.

8
bekannte Bots
Klassifizieren
User-Agent-Registry

8 bekannte KI-Bots werden anhand des exakten UA-Strings abgeglichen. Unbekannte Bots bleiben als 'other AI', bis wir Unterstützung ergänzen. Falschmeldungen sind selten.

<1s
Protokollverzögerung
Streamen
SSE → Dashboard

Klassifizierte Treffer fließen per Server-Sent Events ans Dashboard. Die Seite bleibt offen, Treffer scrollen herein, Diagramme werden neu gerendert. Kein Polling, kein Refresh.

live im Dashboard
Preise

Im Hosting enthalten, nicht separat verkauft.

Bot-Tracking ist nicht hinter einem höheren Tarif gesperrt. Starter, Growth, Business — alle drei sehen jeden KI-Crawler-Aufruf, jederzeit.

$149
/Jahr

Starter, 2 Websites, volles Crawler-Dashboard auf beiden. Nur jährlich.

8 KI-Bots verfolgt<1s Protokollverzögerung90 Tage SpeicherdauerURL-AufschlüsselungCSV-ExportWebhook-Zustellung
Kostenlos testen
Fragen

Was Käufer fragen, bevor sie dem Bot-Dashboard vertrauen.

Welche KI-Bots werden verfolgt?+

GPTBot, ChatGPT-User, ClaudeBot, anthropic-ai, PerplexityBot, Google-Extended, Meta-ExternalAgent, Bytespider, Amazonbot und Applebot-Extended. Unbekannte Bots werden als 'other AI' geführt, bis wir explizite Unterstützung ergänzen.

Verlangsamt das Tracking meine Website?+

Nein. Wir parsen das Ende des nginx-Zugriffsprotokolls in einem Sidecar-Prozess. Der Web-Request-Pfad bleibt unberührt — gleiches nginx, gleiches PHP-FPM, gleiche Antwortzeiten.

Funktioniert das hinter Cloudflare?+

Ja. Cloudflare leitet den echten User-Agent weiter. Wir klassifizieren am Origin, sodass selbst Bots, die am Edge gecacht wurden, beim Revalidieren erscheinen.

Kann ich Aufrufe für eine bestimmte URL sehen?+

Ja. Klicke im Dashboard auf eine beliebige URL und erhalte eine chronologische Liste der Bot-Aufrufe mit Bot-Name, Statuscode und Antwortzeit.

Gibt es eine API?+

Webhook-Ausgang für neue Treffer, REST-Endpunkt für historische Abfragen. Beide per Website-Token authentifiziert. Der CSV-Export deckt den No-Code-Fall ab.

Wie lange werden Daten gespeichert?+

90 Tage, in jedem Tarif. CSV-Export jederzeit innerhalb dieses Zeitraums verfügbar.

Abschluss

Hör auf zu raten, ob KI deine Website liest.

Eine Website in sieben Minuten migrieren. Bis der Kaffee fertig ist, hat das Crawler-Dashboard seine ersten echten Datenpunkte.

Kostenlos testen
Testphase · Live-Protokolle ab Minute eins