Wie viel KI-Bot-Traffic hat eine typische Website?
Eine verlässliche Zahl für eine typische Site gibt es nicht, weil es davon abhängt, was die Site ist: Eine Dokumentationssite wird jede Nacht von Crawlern gelesen, ein Shop sieht Live-Assistenten, die Produktfragen beantworten, ein Blog sieht Referrals, nachdem er zitiert wurde. Was du tun kannst: deinen eigenen an einem Tag messen, Crawler-Abrufe aus dem Server-Log, gegen Anbieter-Adressbereiche verifiziert, plus Assistenten-Referrals und Tool-Aufrufe über ein Script-Tag.
Von Gorden Wübbe · Stand 2026-09-08
Warum veröffentlichte Durchschnitte nicht helfen
Branchenberichte zählen Anfragen am Netzrand über Millionen Sites, was etwas über das Internet sagt und nichts über dich. Ein Crawler, der jede Nacht 400 Seiten einer Dokumentationssite liest, ist dort normal und auf einer Fünf-Seiten-Broschüre alarmierend. Die nützliche Zahl ist deine, nach Agent und Seite, mit Trend.
Die drei Bestandteile
Crawler-Abrufe: GPTBot, ClaudeBot, PerplexityBot, OAI-SearchBot, Google-Extended und Co., nur im Server-Log sichtbar, weil sie kein JavaScript ausführen. Live-Abrufe: ChatGPT-User, Perplexity-User und andere Assistenten, die gerade eine Frage über dich beantworten, meist drei bis zehn Seiten in wenigen Sekunden. Referrals: Menschen, die von einem Assistenten kommen, der dich zitiert hat. Die meisten Sites haben die ersten beiden lange vor dem dritten.
An einem Tag messen
Site hinzufügen, Snippet einbauen, das Access-Log von gestern hochladen. Das Dashboard zeigt innerhalb von Minuten Abrufe je Agent mit Verifikation, Bursts, Referrals und Seiten, nach einer Woche einen Trend. Ein öffentliches Beispiel ist die Live-Stats-Seite dieser Site, täglich aktualisiert, und sie ist klein, weil die Domain neu ist.
curl -sS -X POST https://agenttracking.co/api/logs/example.com \ -H "Authorization: Bearer wmt_your_token" \ -H "Content-Type: text/plain" --data-binary @/var/log/nginx/access.log
Das Ergebnis lesen
Ein hoher, gleichmäßiger Abrufwert eines Crawlers ist Training oder Indexierung; ob du das willst, ist eine robots.txt-Entscheidung. Bursts von wenigen Seiten in Sekunden sind Fragen, die über dich beantwortet werden; diese Seiten hält der Assistent für relevant. Referrals sind der Teil, der zu Geschäft wird, und sie hinken den anderen beiden meist um Wochen hinterher. Unverifizierte Zeilen, die einen bekannten Bot behaupten, sind Nachahmer und einen Blick wert.
Kurz gefragt
Könnt ihr Benchmarks eurer Kunden teilen?
Noch nicht, und nicht ohne deren Zustimmung. Die Pilotphase ist Tage alt. Wenn es genug Sites gibt und die Betreiber einverstanden sind, erscheinen hier aggregierte Spannen je Site-Typ.
Zählen Seitenaufrufe von Menschen auf mein Kontingent?
Nein. Nur Agenten-Ereignisse zählen. Reine Seitenaufrufe erscheinen als Summe zur Einordnung.