AI-Suchoptimierungs-Tool

AI-Crawlability-Checker

Prüfen Sie, ob ChatGPT, Claude, Perplexity, Google Gemini und andere AI-Suchmaschinen Ihre Website crawlen und indexieren können.

  • Geprüfte AI-Bots
  • robots.txt-Analyse
  • llms.txt-Erkennung
  • Sofortige Ergebnisse

Geben Sie Ihre Website-URL ein

Wir prüfen robots.txt, llms.txt, Meta-Tags und HTTP-Header für alle wichtigen AI-Crawler.

Von uns geprüfte AI-Crawler

  • GPTBot
  • ClaudeBot + anthropic-ai
  • PerplexityBot
  • Google-Extended
  • meta-externalagent
  • CCBot
  • Amazonbot
  • cohere-ai

AI-Crawlability-Score

Wir prüfen robots.txt, llms.txt, Meta-Tags und HTTP-Header für alle wichtigen AI-Crawler.

Finden Sie jetzt heraus, wer tatsächlich von der AI-Suche besucht

Gecrawlt zu werden ist Schritt eins. Schritt zwei ist zu wissen, welche AI-Plattformen Ihnen echten Traffic senden. UseClick trackt Besuche von ChatGPT, Perplexity und jeder anderen Quelle.

Kostenlos starten
AI-Suchoptimierungs-Tool

Was ist AI-Crawlability?

Prüfen Sie, ob ChatGPT, Claude, Perplexity, Google Gemini und andere AI-Suchmaschinen Ihre Website crawlen und indexieren können.

  • AI-gestützte Suche wächst

    ChatGPT, Perplexity, Claude und Google Gemini werden zu primären Wegen, wie Menschen Informationen finden.

  • robots.txt steuert den Zugriff

    Ihre robots.txt-Datei ist das Haupttorwächter für AI-Crawler.

  • llms.txt ist der neue Standard

    Wie robots.txt die traditionelle SEO revolutioniert hat, wird llms.txt zum Standard für AI-First-Content-Discovery.

Von uns geprüfte AI-Crawler

Unser Tool prüft Ihre Website gegen alle wichtigen AI-Suchmaschinen-Crawler.

  • ChatGPT / OpenAI

    GPTBot

    Antrieb für ChatGPTs Websuche und Wissensdatenbank. Größte AI-Such-Nutzerbasis.

  • Claude / Anthropic

    ClaudeBot + anthropic-ai

    Antrieb für Claude AI von Anthropic. Prüft beide Bot-Identifikatoren, die von Anthropic verwendet werden.

  • Perplexity AI

    PerplexityBot

    Antrieb für Perplexity.ai, eine der am schnellsten wachsenden AI-Suchmaschinen.

  • Google Gemini

    Google-Extended

    Antrieb für Googles AI-Funktionen einschließlich Gemini und Search Generative Experience.

  • Meta AI

    meta-externalagent

    Antrieb für Meta AI über Facebook, Instagram und WhatsApp.

  • Common Crawl

    CCBot

    Offener Datensatz, der zum Trainieren der meisten großen LLMs verwendet wird. Hier indexiert zu sein hilft vielen AI-Modellen.

  • Amazon Alexa

    Amazonbot

    Antrieb für Amazon Alexa und Amazons AI-gestützte Suchfunktionen.

  • Cohere AI

    cohere-ai

    Enterprise-AI-Plattform, die von vielen Unternehmen für interne AI-Suche und RAG-Systeme verwendet wird.

Wie Sie Ihre Website für AI-Crawler optimieren

Befolgen Sie diese Schritte, um Ihre AI-Such-Sichtbarkeit zu maximieren.

Step 01

Ihre robots.txt auditieren

Öffnen Sie Ihre robots.txt unter yourdomain.com/robots.txt. Suchen Sie nach Disallow-Regeln.

robots.txt
# Allow all AI crawlers
User-agent: GPTBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Google-Extended
Allow: /
Step 02

Eine llms.txt-Datei erstellen

Platzieren Sie eine llms.txt-Datei im Stammverzeichnis Ihrer Domain. Dieser aufkommende Standard hilft LLMs, Ihre Website zu verstehen.

llms.txt
# My Company — Short description

## About
We provide [what you do].

## Key Pages
- [Homepage](https://example.com/)
- [About](https://example.com/about)
- [Blog](https://example.com/blog)

## Optional
- [Sitemap](https://example.com/sitemap.xml)
Step 03

Meta-Robots-Tags prüfen

Stellen Sie sicher, dass Ihre Seiten keine noai- oder noindex-Tags in ihren Meta-Robots haben.

<head>
<!-- Good: allows AI indexing -->
<meta name="robots" content="index, follow">

<!-- Bad: blocks AI crawlers -->
<meta name="robots" content="noai, noimageai">

<!-- Bad: blocks all crawling -->
<meta name="robots" content="noindex, nofollow">
Step 04

Eine sitemap.xml hinzufügen

Eine Sitemap hilft AI-Crawlern, alle Seiten auf Ihrer Website zu entdecken.

robots.txt
# In robots.txt, add:
Sitemap: https://yourdomain.com/sitemap.xml

# Most CMSes auto-generate sitemaps:
# WordPress: /sitemap.xml or /sitemap_index.xml
# Shopify: /sitemap.xml
# Next.js: use next-sitemap package

Finden Sie jetzt heraus, wer tatsächlich von der AI-Suche besucht

Gecrawlt zu werden ist Schritt eins. Schritt zwei ist zu wissen, welche AI-Plattformen Ihnen echten Traffic senden. UseClick trackt Besuche von ChatGPT, Perplexity und jeder anderen Quelle.

Kostenlos starten
FAQ

Häufig gestellte Fragen

KI-Crawlability beschreibt, wie leicht KI-Suchmaschinen und LLM-Crawler Ihre Website finden, lesen und indexieren können.

GPTBot ist der Crawler von OpenAI. Sie können ihn je nach Strategie in robots.txt erlauben oder blockieren.

ClaudeBot und anthropic-ai sind Crawler von Anthropic. Behandeln Sie beide Kennungen in robots.txt konsistent.

llms.txt ist ein neues Dateiformat, das KI-Systemen wichtige Seiten und Content-Struktur erklärt.

robots.txt steuert, welche Bots Ihre Website crawlen dürfen. Bot-spezifische Disallow-Regeln können einzelne KI-Crawler blockieren.

Das hängt von Ihrer Strategie ab. Erlauben kann die KI-Sichtbarkeit erhöhen; Blockieren gibt mehr Kontrolle.

Der Score kombiniert HTTPS, robots.txt, Sitemap, llms.txt und Zugriff für wichtige KI-Crawler.

Google-Extended ist Googles Steuerungs-Token für Gemini und KI-gestützte Suchfunktionen.

Kostenloses Tool

Mehr kostenlose SEO- & Marketing-Tools

Alle kostenlosen Tools

Bereit, smarter zu tracken?

UseClick.io macht Link-Management mühelos. Erstelle gebrandete Short Links, die clean, einprägsam und darauf ausgelegt sind, deine Markenidentität zu stärken.

Kostenlos starten