AI-Crawlability-Checker
Prüfen Sie, ob ChatGPT, Claude, Perplexity, Google Gemini und andere AI-Suchmaschinen Ihre Website crawlen und indexieren können.
Geben Sie Ihre Website-URL ein
Wir prüfen robots.txt, llms.txt, Meta-Tags und HTTP-Header für alle wichtigen AI-Crawler.
Finden Sie jetzt heraus, wer tatsächlich von der AI-Suche besucht
Gecrawlt zu werden ist Schritt eins — Schritt zwei ist zu wissen, welche AI-Plattformen Ihnen echten Traffic senden. UseClick trackt Besuche von ChatGPT, Perplexity und jeder anderen Quelle.
Was ist AI-Crawlability?
Prüfen Sie, ob ChatGPT, Claude, Perplexity, Google Gemini und andere AI-Suchmaschinen Ihre Website crawlen und indexieren können.
AI-gestützte Suche wächst
ChatGPT, Perplexity, Claude und Google Gemini werden zu primären Wegen, wie Menschen Informationen finden.
robots.txt steuert den Zugriff
Ihre robots.txt-Datei ist das Haupttorwächter für AI-Crawler.
llms.txt ist der neue Standard
Wie robots.txt die traditionelle SEO revolutioniert hat, wird llms.txt zum Standard für AI-First-Content-Discovery.
Von uns geprüfte AI-Crawler
Unser Tool prüft Ihre Website gegen alle wichtigen AI-Suchmaschinen-Crawler.
ChatGPT / OpenAI
GPTBotAntrieb für ChatGPTs Websuche und Wissensdatenbank. Größte AI-Such-Nutzerbasis.
Claude / Anthropic
ClaudeBot + anthropic-aiAntrieb für Claude AI von Anthropic. Prüft beide Bot-Identifikatoren, die von Anthropic verwendet werden.
Perplexity AI
PerplexityBotAntrieb für Perplexity.ai — eine der am schnellsten wachsenden AI-Suchmaschinen.
Google Gemini
Google-ExtendedAntrieb für Googles AI-Funktionen einschließlich Gemini und Search Generative Experience.
Meta AI
meta-externalagentAntrieb für Meta AI über Facebook, Instagram und WhatsApp.
Common Crawl
CCBotOffener Datensatz, der zum Trainieren der meisten großen LLMs verwendet wird. Hier indexiert zu sein hilft vielen AI-Modellen.
Amazon Alexa
AmazonbotAntrieb für Amazon Alexa und Amazons AI-gestützte Suchfunktionen.
Cohere AI
cohere-aiEnterprise-AI-Plattform, die von vielen Unternehmen für interne AI-Suche und RAG-Systeme verwendet wird.
Wie Sie Ihre Website für AI-Crawler optimieren
Befolgen Sie diese Schritte, um Ihre AI-Such-Sichtbarkeit zu maximieren.
Ihre robots.txt auditieren
Öffnen Sie Ihre robots.txt unter yourdomain.com/robots.txt. Suchen Sie nach Disallow-Regeln.
# Allow all AI crawlers User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: /
Eine llms.txt-Datei erstellen
Platzieren Sie eine llms.txt-Datei im Stammverzeichnis Ihrer Domain. Dieser aufkommende Standard hilft LLMs, Ihre Website zu verstehen.
# My Company — Short description ## About We provide [what you do]. ## Key Pages - [Homepage](https://example.com/) - [About](https://example.com/about) - [Blog](https://example.com/blog) ## Optional - [Sitemap](https://example.com/sitemap.xml)
Meta-Robots-Tags prüfen
Stellen Sie sicher, dass Ihre Seiten keine noai- oder noindex-Tags in ihren Meta-Robots haben.
<!-- Good: allows AI indexing --> <meta name="robots" content="index, follow"> <!-- Bad: blocks AI crawlers --> <meta name="robots" content="noai, noimageai"> <!-- Bad: blocks all crawling --> <meta name="robots" content="noindex, nofollow">
Eine sitemap.xml hinzufügen
Eine Sitemap hilft AI-Crawlern, alle Seiten auf Ihrer Website zu entdecken.
# In robots.txt, add: Sitemap: https://yourdomain.com/sitemap.xml # Most CMSes auto-generate sitemaps: # WordPress: /sitemap.xml or /sitemap_index.xml # Shopify: /sitemap.xml # Next.js: use next-sitemap package
Finden Sie jetzt heraus, wer tatsächlich von der AI-Suche besucht
Gecrawlt zu werden ist Schritt eins — Schritt zwei ist zu wissen, welche AI-Plattformen Ihnen echten Traffic senden. UseClick trackt Besuche von ChatGPT, Perplexity und jeder anderen Quelle.
Häufig gestellte Fragen
Alles, was Sie über AI-Crawlability wissen müssen und wie Sie Ihre Website für AI-Suchmaschinen optimieren.
Häufig gestellte Fragen
KI-Crawlability beschreibt, wie leicht KI-Suchmaschinen und LLM-Crawler Ihre Website finden, lesen und indexieren können.
GPTBot ist der Crawler von OpenAI. Sie können ihn je nach Strategie in robots.txt erlauben oder blockieren.
ClaudeBot und anthropic-ai sind Crawler von Anthropic. Behandeln Sie beide Kennungen in robots.txt konsistent.
llms.txt ist ein neues Dateiformat, das KI-Systemen wichtige Seiten und Content-Struktur erklärt.
robots.txt steuert, welche Bots Ihre Website crawlen dürfen. Bot-spezifische Disallow-Regeln können einzelne KI-Crawler blockieren.
Das hängt von Ihrer Strategie ab. Erlauben kann die KI-Sichtbarkeit erhöhen; Blockieren gibt mehr Kontrolle.
Der Score kombiniert HTTPS, robots.txt, Sitemap, llms.txt und Zugriff für wichtige KI-Crawler.
Google-Extended ist Googles Steuerungs-Token für Gemini und KI-gestützte Suchfunktionen.
Mehr kostenlose SEO- & Marketing-Tools
Meta-Tag-Analysator
Analysieren Sie die Meta-Tags, Open-Graph-Daten und technischen SEO-Elemente jeder Website.
Link-Checker & Validator
Prüfen Sie, ob Ihre Links funktionieren, verfolgen Sie Redirects und verifizieren Sie SSL-Zertifikate.
Meta-Tag-Tester
Sehen Sie eine Vorschau, wie Ihr Meta-Titel und Ihre Beschreibung in den Google-Suchergebnissen erscheinen.
Bereit, smarter zu tracken?
UseClick.io macht Link-Management mühelos. Erstelle gebrandete Short Links, die clean, einprägsam und darauf ausgelegt sind, deine Markenidentität zu stärken.