Parya Golpaygani

AI Visibility

KI-Sichtbarkeit prüfen: Was Crawling, Indexierung und strukturierte Daten leisten

Kann eine KI-Suche Ihre Website überhaupt abrufen? Findet sie dort verständliche Informationen über Ihre Leistungen? Und sind die Einstellungen für das jeweilige System passend gesetzt? Wenn Sie die KI-Sichtbarkeit Ihrer Website prüfen möchten, lohnt sich zuerst ein Blick …

admin8 Min. Lesezeit · Aktualisiert am 1. November 2026
KI-Sichtbarkeit prüfen: Was Crawling, Indexierung und strukturierte Daten leisten

Kann eine KI-Suche Ihre Website überhaupt abrufen? Findet sie dort verständliche Informationen über Ihre Leistungen? Und sind die Einstellungen für das jeweilige System passend gesetzt?

Wenn Sie die KI-Sichtbarkeit Ihrer Website prüfen möchten, lohnt sich zuerst ein Blick auf diese Grundlagen. Ein Unternehmen kann einen ausführlichen Ratgeber veröffentlicht haben, während eine wichtige Leistungsseite für einen Such-Crawler gesperrt ist. Auch widersprüchliche Angaben oder technisch schwer zugängliche Inhalte können eine Untersuchung erforderlich machen.

Dabei sollten Sie drei Fragen auseinanderhalten: Kann ein System die Seite abrufen? Wird sie in einem Suchindex berücksichtigt? Wird sie für eine bestimmte Antwort ausgewählt? Die Ergebnisse dieser Prüfungen sind unterschiedlich zu bewerten. Ein erfolgreicher Abruf belegt beispielsweise noch keine Erwähnung in einer KI-Antwort.

In diesem Beitrag erfahren Sie, welche technischen Punkte Sie prüfen können und wie daraus ein nachvollziehbarer Maßnahmenplan entsteht.

Für welches KI-System möchten Sie Ihre Website prüfen?

Beginnen Sie mit einem klaren Prüfziel. Eine Untersuchung für die Google-Suche beantwortet andere Fragen als eine Untersuchung der Zugriffsmöglichkeiten von ChatGPT oder Perplexity.

Google-Suche und ihre generativen Funktionen

Für Google prüfen Sie zunächst die Grundlagen der Suchindexierung: eine erreichbare Seite, zugängliche Inhalte und passende Indexierungsregeln. Google nennt diese Voraussetzungen in seinen technischen Anforderungen für die Suche. Ihre Erfüllung garantiert keine Aufnahme in den Index.

Zusätzlich gibt es in der Search Console unter Einstellungen → Search generative AI eine eigene Steuerung für die Einbeziehung der Website in bestimmte generative Suchfunktionen. Dazu gehören nach Googles aktueller Dokumentation AI Overviews, AI Mode und generative Funktionen in Discover. Prüfen Sie, ob die Property einbezogen wird, ausgeschlossen ist oder eine Einstellung der übergeordneten Property übernimmt. Die Einzelheiten erklärt die Search-Console-Hilfe zur generativen KI-Steuerung.

Diese Einstellung hat eine andere Aufgabe als Google-Extended. Google beschreibt Google-Extended als Steuerung bestimmter Verwendungen für Gemini und Vertex AI. Der Eintrag beeinflusst laut Google weder die Aufnahme in die Google-Suche noch das Ranking dort. Maßgeblich ist die aktuelle Dokumentation der Google-Crawler.

ChatGPT-Suche

OpenAI unterscheidet zwischen mehreren Zugriffszwecken. OAI-SearchBot dient der Suche, GPTBot dem möglichen Einsatz abgerufener Inhalte für das Training von Basismodellen. Die Einstellungen lassen sich unabhängig voneinander vornehmen. Eine Sperre von GPTBot allein bedeutet deshalb keine Sperre von OAI-SearchBot.

Für eine Prüfung der ChatGPT-Suche betrachten Sie insbesondere die Regeln für OAI-SearchBot und mögliche serverseitige Blockaden. OpenAI veröffentlicht dafür eine Übersicht seiner Crawler und IP-Bereiche. Nutzerinitiierte Abrufe haben wiederum einen eigenen Kontext und sollten im Protokoll getrennt erfasst werden.

Perplexity

Perplexity beschreibt PerplexityBot als Crawler für das Auffinden und Verlinken von Websites in seinen Suchergebnissen. Prüfen Sie dessen Zugriffsregeln und bei Bedarf die Firewall-Konfiguration anhand der offiziellen Crawler-Dokumentation von Perplexity.

Für die Praxis bedeutet das: Halten Sie für jedes untersuchte System fest, welchen Zugriffszweck Sie betrachten. Eine allgemeine Aussage wie „Die KI-Bots sind freigeschaltet“ ist für die weitere Fehlerdiagnose zu ungenau.

Crawling prüfen: Erreicht der gewünschte Bot Ihre Leistungsseite?

Crawling bezeichnet den Abruf von Inhalten durch einen Crawler. Für die Prüfung wählen Sie zunächst wenige geschäftlich wichtige URLs aus: beispielsweise Ihre zentrale Leistungsseite, eine Standortseite und einen fachlichen Ratgeber.

Bei jeder URL klären Sie:

  • Liefert der Server die erwartete Seite oder eine Fehler- beziehungsweise Anmeldeseite?
  • Welche Regel in der robots.txt gilt für den betreffenden Crawler?
  • Verhindern Firewall, CDN oder Bot-Schutz den Zugriff?
  • Unterscheidet sich die Antwort für normale Besucher und den tatsächlich geprüften Bot?

Die robots.txt steuert für Crawler, die diese Regeln beachten, den Abruf. Sie ist kein verlässliches Mittel, eine URL aus Google auszuschließen: Eine blockierte URL kann unter Umständen weiterhin ohne ausgelesenen Seiteninhalt in Suchergebnissen erscheinen. Google erläutert die Grenzen in seiner Einführung zur robots.txt.

Dokumentieren Sie deshalb neben der Regel auch den tatsächlichen Befund. Bei einer vermuteten Firewall-Sperre sind Server- oder Sicherheitsprotokolle hilfreicher als eine Vermutung anhand eines einzelnen Browseraufrufs. Ein frei gewählter User-Agent in einem Test ersetzt zudem keine Prüfung der authentischen Bot-Zugriffe.

Indexierung prüfen: Was ist für Google freigegeben und was tatsächlich aufgenommen?

Nach dem Zugriff folgt die Prüfung der Indexierungsregeln. Besonders wichtig sind noindex-Anweisungen im HTML oder im HTTP-Header X-Robots-Tag.

Google muss die Seite abrufen können, um eine solche Anweisung auszulesen. Eine gleichzeitige Sperre in der robots.txt kann genau diesen Abruf verhindern. Die Funktionsweise beschreibt Google in seiner Dokumentation zu noindex.

Sehen Sie anschließend in der URL-Prüfung der Search Console nach, welchen Indexierungsstatus Google für die betreffende Adresse meldet. Bewerten Sie einen aktuellen Live-Test und den gespeicherten Indexierungsstand jeweils mit ihrem Zeitpunkt. Ein heute behobener Fehler muss im gespeicherten Stand noch nicht berücksichtigt sein.

Auch die bevorzugte URL-Version gehört zur Untersuchung. Ein Canonical-Verweis ist ein Signal für die Auswahl einer maßgeblichen Version bei gleichen oder sehr ähnlichen Seiten. Er ist keine verbindliche Anweisung. Kontrollieren Sie deshalb, ob Canonical, interne Links und Sitemap zusammenpassen und ob Google eine andere Version ausgewählt hat. Dazu bietet Google eine Anleitung zur Canonicalisierung.

Wenn solche Grundlagen offen sind, kann ein technisches SEO-Audit die Befunde bündeln und die nächsten Prüfungen eingrenzen.

Inhalte prüfen: Sind die entscheidenden Informationen zugänglich?

Ein sichtbares Website-Design sagt noch nicht, in welcher Form ein Crawler die Inhalte erhält. Untersuchen Sie deshalb die ausgelieferte HTML-Antwort und, soweit für das System relevant und überprüfbar, die gerenderte Seite.

Google kann JavaScript ausführen. Andere Bots verfügen nicht zwangsläufig über dieselben Möglichkeiten. Google empfiehlt in seiner Dokumentation zu JavaScript-SEO auch deshalb serverseitiges Rendering oder Vorab-Rendering als sinnvolle Option. Daraus folgt kein pauschales Verbot von JavaScript.

Für eine Leistungsseite würde ich insbesondere diese Informationen prüfen:

  • Welche Leistung wird angeboten und für wen ist sie geeignet?
  • In welcher Region oder an welchem Standort ist sie verfügbar?
  • Wie läuft die Zusammenarbeit oder Anfrage ab?
  • Welche Bedingungen und Einschränkungen sind wichtig?
  • Wer ist für das Angebot verantwortlich und wie ist die Person erreichbar?

Diese Angaben sollten als verständlicher Text verfügbar sein. Werden wichtige Aussagen ausschließlich in Grafiken, Videos oder komplexen Interaktionen vermittelt, prüfen Sie eine passende textliche Ergänzung. Das erleichtert zugleich Besuchern, das Angebot schnell einzuordnen.

Strukturierte Daten prüfen: Stimmen die Angaben mit der Seite überein?

Strukturierte Daten beschreiben Inhalte in einem maschinenlesbaren Format. Bei einer Unternehmenswebsite können beispielsweise Angaben zur Organisation oder zu einem Artikel relevant sein. Welche Auszeichnung passt, hängt vom tatsächlichen Inhalt ab.

Ich würde drei Dinge prüfen: Ist die Auszeichnung technisch korrekt? Beschreibt sie die konkrete Seite? Stimmen die Angaben mit dem überein, was Besucher dort lesen können?

Ein Beispiel: Auf der Kontaktseite steht die aktuelle Adresse, in einem automatisch erzeugten Datenblock aber noch die frühere Anschrift. Diesen Widerspruch sollten Sie korrigieren. Ebenso gehören erfundene Bewertungen, Leistungen oder Auszeichnungen nicht in das Markup.

Googles Richtlinien für strukturierte Daten verlangen unter anderem zutreffende und sichtbare Inhalte. Ein erfolgreich bestandener Rich Results Test garantiert außerdem keine besondere Darstellung in der Suche. Er prüft auch nicht, ob eine KI Ihre Website als Quelle auswählen wird.

Brauchen Sie llms.txt oder spezielles AI-Markup?

Für die Google-Suche einschließlich ihrer generativen Funktionen verlangt Google weder eine llms.txt noch ein spezielles AI-Schema. Laut Googles Leitfaden zur Optimierung für generative Suchfunktionen wird llms.txt dort nicht verwendet. Die Datei verbessert oder verschlechtert die Sichtbarkeit in der Google-Suche deshalb nicht.

Diese Aussage gilt für Google. Ob eine andere Anwendung eine solche Datei nutzt, prüfen Sie anhand ihrer eigenen Dokumentation und des konkreten Einsatzzwecks. Aus dem Vorhandensein einer Datei lässt sich keine allgemeine KI-Sichtbarkeit ableiten.

Für die Planung empfehle ich: Beheben Sie zuerst nachgewiesene Zugriffs- und Inhaltsprobleme auf den wichtigen Seiten. Bewerten Sie zusätzliche Formate anschließend nach einem belegbaren Nutzen für das jeweils betrachtete System.

Vorlage für ein nachvollziehbares Prüfprotokoll

Mit dieser Tabelle können Sie eine Untersuchung vorbereiten. Sie enthält Prüffragen und benötigte Belege; sie stellt keine bereits durchgeführte Website-Analyse dar.

URL oder Bereich System Prüffrage Zu dokumentierender Beleg
Zentrale Leistungsseite Googlebot Sind Abruf und Indexierung erlaubt? Datum, HTTP-Status, relevante Robots-Regeln und URL-Prüfung
Leistungsseite ChatGPT-Suche Kann OAI-SearchBot zugreifen? Geltende Regel und verifizierter Zugriffs- oder Firewall-Befund
Standortseite Perplexity Wird der gewünschte Zugriff blockiert? Bot-Regel und passender Server- oder Sicherheitsprotokolleintrag
Wichtige Seiten Jeweiliges System Ist die Kernaussage technisch zugänglich? Ausgeliefertes HTML und gegebenenfalls Rendering-Befund
Ausgezeichnete Seite Google Passen strukturierte Daten zum sichtbaren Inhalt? Validierung und inhaltlicher Abgleich
Search-Console-Property Google-Suche Welche generative KI-Einstellung gilt? Aktueller Wert und gegebenenfalls geerbte Einstellung

 

Ergänzen Sie bei jedem Befund die empfohlene Maßnahme, die verantwortliche Person und einen Termin für die erneute Prüfung. So bleibt nachvollziehbar, was beobachtet, geändert und anschließend kontrolliert wurde.

Welche Maßnahmen kommen zuerst?

Für die Reihenfolge würde ich geschäftliche Bedeutung, Eindeutigkeit des Befunds und Abhängigkeiten gemeinsam betrachten.

  1. Erreichbarkeit der wichtigen Seiten herstellen: Bestätigte Zugriffsprobleme und unbeabsichtigte Ausschlüsse prüfen und gezielt korrigieren.
  2. Inhalte und technische Darstellung abgleichen: Fehlende Leistungsinformationen, veraltete Angaben und widersprüchliche Auszeichnungen bearbeiten.
  3. Nach der Änderung erneut prüfen: Abruf und Einstellungen kontrollieren, danach Indexierungsstand und beobachtete Sichtbarkeit mit Datum dokumentieren.

Eine solche Reihenfolge ist eine Arbeitsempfehlung. Ein individueller Befund kann eine andere Priorität rechtfertigen. Bleibt die Website trotz technisch erfüllter Grundlagen in bestimmten Antworten unerwähnt, sollten Sie zusätzlich untersuchen, ob die Inhalte die konkrete Kundenfrage fundiert beantworten.

Häufige Fragen zur technischen KI-Sichtbarkeit

Muss ich GPTBot erlauben, damit meine Seite in der ChatGPT-Suche erscheinen kann?

OpenAI trennt die Steuerung von GPTBot und OAI-SearchBot. Für die Suchfunktion ist insbesondere OAI-SearchBot relevant. Bewerten Sie Suchzugriff und mögliche Trainingsnutzung getrennt.

Ist eine bei Google indexierte Seite automatisch in KI-Antworten sichtbar?

Aus der Indexierung allein lässt sich keine Auswahl für eine bestimmte Antwort ableiten. Außerdem unterscheiden sich die Zugangsvoraussetzungen und Quellen der einzelnen Systeme. Prüfen Sie deshalb immer das konkrete Suchprodukt und die konkrete Fragestellung.

Reicht ein Plugin, das strukturierte Daten ergänzt?

Ein Plugin kann die technische Erstellung unterstützen. Sie müssen weiterhin prüfen, ob die Auszeichnung zum Inhalt passt und aktuell ist. Die Zugänglichkeit der Seite und die Qualität ihrer Informationen sind zusätzliche Prüfbereiche.

Wie schnell wirkt eine technische Korrektur?

Das hängt von der Änderung und dem untersuchten System ab. Ein direkt kontrollierter Serverfehler kann nach der Behebung verschwunden sein, während ein gespeicherter Indexierungsstand noch älter ist. Dokumentieren Sie den technischen Erfolg und die spätere Sichtbarkeitsentwicklung getrennt, statt einen festen Erfolgszeitpunkt anzunehmen.

Möchten Sie die technischen Grundlagen Ihrer KI-Sichtbarkeit prüfen lassen?

Ich unterstütze Sie dabei, Zugriffsregeln, wichtige Inhalte und technische Befunde gemeinsam zu bewerten. Sie erhalten eine begründete Reihenfolge für die nächsten Schritte und eine klare Einordnung dessen, was geprüft wurde und was offenbleibt.

Erfahren Sie mehr über meine AI-Visibility-Beratung oder besprechen Sie Ihr Projekt mit mir.

 

Parya Golpaygani

ÜBER DIE AUTORIN

Über Parya Golpaygani

Senior Full Stack Marketing Manager mit Schwerpunkt SEO und AI Visibility. Technisches SEO, Content- und Entitäten-Architektur, Paid Search und Messung.

Mehr über Parya →