AI-SEO-Dashboard für Crawler-Monitoring

AI Crawler Insights

Analysieren Sie KI-Bot-Traffic, robots.txt für KI, AI-Search-Sichtbarkeit und Agent-Readiness in einer Ansicht für SEO-, Publisher- und Entwicklerteams.

Zeitraum
Aktuelles Signal7d

Führender Crawler

Googlebot

23.8 Anteil

Top-Crawler-Standort

Gibraltar (GI)

95.4 Aktivitätsindex

Top-KI-Dienst

ChatGPT / OpenAI

15 Index

Springe zu

Alle Signale auf einer Seite

Scanne zuerst die komplette Live-Ansicht und springe dann zum Datensatz hinter einer Crawler-, Policy-, Ökonomie-, Service- oder Readiness-Frage.

Crawler-Nachfrage

Wer crawlt, warum sie crawlen und ob das Verhalten sauber aussieht.

Traffic-Wert

Ob Crawl-Last, Client-Typen und Referral-Signale zusammenpassen.

Policy & Readiness

Welche User-Agents explizite Regeln brauchen und welche Agent-Signale fehlen.

Märkte & Geografie

Wo Nachfrage entsteht und welche KI-Dienste Sichtbarkeit gewinnen.

KI-Bot-Anteil

Aktualisiert: 2026-10-17T08:30:00Z

Nutzen Sie das für: zu entscheiden, welche Crawler Monitoring, Allow-Regeln oder strengere Limits brauchen.

Detailansicht
Googlebot23.8
other18.2
ClaudeBot13.2
Meta-ExternalAgent8.7
Bingbot7.9
Applebot7.8
GPTBot5.9
ShapBot5.0
OAI-SearchBot4.7
Amazonbot4.7

Crawl-Zweck

Aktualisiert: 2026-10-17T08:30:00Z

Nutzen Sie das für: Antwort- und Suchtraffic von Training und unbekannter Crawler-Aktivität zu trennen.

Detailansicht
Training42.7
Mixed Purpose39.5
Search11.9
User Action4.4
Undeclared1.5

Top-Länder

Aktualisiert: 2026-10-17T09:05:00Z

Nutzen Sie das für: regionalen Crawl-Druck vor Blocks, Caching- oder Infrastrukturänderungen zu erkennen.

Detailansicht
Gibraltar (GI)95.4
Singapore (SG)81.3
Netherlands (NL)72.5
Ireland (IE)71.5
Hong Kong (HK)64.9
Finland (FI)64.4
Cayman Islands (KY)63.9
China (CN)62.8
Iran (IR)57.1
Belgium (BE)56.2
Isle of Man (IM)55.7
United States (US)54.9
Germany (DE)52.8
Luxembourg (LU)47.9
Russian Federation (RU)43.4

Crawl-/Referral-Signal

Aktualisiert: 2026-10-17T08:30:00Z

Nutzen Sie das für: zu bewerten, ob Crawler-Nachfrage genug Besucherwert zurückgibt.

Detailansicht
Anthropic∞
Perplexity∞
Mistral∞
OpenAI∞
ByteDance∞
Google515.9

Client- und Content-Typ

Aktualisiert: 2026-10-17T08:30:00Z

Nutzen Sie das für: Browser-, Such- und KI-Agenten-Nachfrage vor Policy-Änderungen zu trennen.

Detailansicht
HTML75.0
Plain Text8.7
JSON4.8
Images4.3
JavaScript3.8
XML1.4
CSS1.1
other0.7
Binary0.2

Crawler-Verhalten

Aktualisiert: 2026-10-17T08:30:00Z

Nutzen Sie das für: beobachtetes Crawler-Verhalten in Allowlists, Alerts und Rate Limits zu übersetzen.

Detailansicht
20056.1
40317.9
4048.8
3016.5
other2.9
3022.8
4292.6
2061.1
2040.9
5030.4

Generative KI-Dienste

Aktualisiert: 2026-10-17

Nutzen Sie das für: KI-Service-Sichtbarkeit mit Referral-Analytics und Optimierungsprioritäten zu vergleichen.

Detailansicht
ChatGPT / OpenAI#1
Claude / Anthropic#2
Perplexity#3
Grok / xAI#4
DeepSeek#5
Doubao#6
GitHub Copilot#7
Hugging Face#8
Character.AI#9
Google Gemini#10
Suno AI#11
Dola/Cici#12
Windsurf AI#13
QuillBot#14
Manus#15

robots.txt-User-Agents

Aktualisiert: 2026-10-12T00:00:00Z

Nutzen Sie das für: zu prüfen, welche KI-User-Agents explizite robots.txt-Direktiven brauchen.

Detailansicht
GPTBot725
ClaudeBot628
Google-Extended576
CCBot526
PerplexityBot522
ChatGPT-User493
Bytespider461
OAI-SearchBot445
Googlebot431
facebookexternalhit383
Amazonbot374
meta-externalagent370
Applebot-Extended362
anthropic-ai341
bingbot320

Agent-Readiness-Checks

Aktualisiert: 2026-10-12

Nutzen Sie das für: maschinenlesbare Signale für agentenfreundliche Websites zu priorisieren.

Detailansicht
robotsTxt90,723
robotsTxtAiRules87,515
sitemap75,013
linkHeaders10,681
oauthDiscovery7,079
markdownNegotiation3,907
ucp3,681
oauthProtectedResource3,099
webMcp2,853
contentSignals2,679
apiCatalog672
agentSkills564
mcpServerCard554
dnsAid477
ard199

Übersicht

Was sich verändert

Starten Sie hier, bevor Sie Crawl-Policy, Rate Limits, Content-Formate oder KI-Sichtbarkeit priorisieren.

Länderaktivität

Nutzen Sie Geografie als Planungssignal, bevor Sie Crawl-Policies oder regionale Infrastruktur ändern.

Entscheidungspfade

Datenquelle: Cloudflare Radar. Von LLMBase für Publisher- und Agent-Readiness-Workflows aufbereitet.