Was ist Googlebot?
Googlebot ist der Crawler, mit dem Google Webseiten abruft und für den Suchindex erfasst. Dieser Index ist auch die Grundlage für die KI-Funktionen in der Google-Suche wie AI Overviews und AI Mode. Wer Googlebot sperrt, fehlt in der Suche und damit auch dort.
Im Zusammenhang mit KI-Sichtbarkeit wird Googlebot oft vergessen, weil die Diskussion sich um GPTBot und ClaudeBot dreht. Für Google gilt aber: Die KI-Funktionen der Suche greifen auf denselben Index zu wie die klassischen Ergebnisse. Google schreibt, dass es für diese Funktionen keine neuen maschinenlesbaren Dateien, KI-Textdateien oder besonderes Markup braucht.
Das macht Googlebot zur Voraussetzung. Eine Seite, die nicht gecrawlt oder nicht indexiert ist, kann in AI Overviews nicht als Quelle erscheinen. Das separate Token Google-Extended ändert daran nichts, es betrifft Gemini-Training und Grounding ausserhalb der Suche.
Googlebot rendert JavaScript, aber nicht zwingend sofort. Inhalte, die erst im Browser nachgeladen werden, sind für Google oft später sichtbar als der Rohtext im HTML. Für andere KI-Crawler, die kein JavaScript ausführen, bleiben sie ganz unsichtbar.
Was das für deine Website heisst
Prüfe in der Google Search Console, ob deine wichtigsten Seiten indexiert sind. Kontrolliere, dass robots.txt und Firewall Googlebot nicht aussperren, und dass die Kernaussagen einer Seite schon im ausgelieferten HTML stehen. Der Render-Lücken-Report von deeploupe zeigt, wie oft genau das bei kleinen Websites fehlt. Eine Seite, die dort gut aussieht und in der Search Console indexiert ist, erfüllt die technische Voraussetzung für AI Overviews.
Verwandte Begriffe
Weiter auf deeploupe
Quellen
Begriffe helfen beim Verstehen. Ob KI-Crawler deine Seite erreichen, zeigt die Messung.
Website gratis prüfenkostenlos · keine Anmeldung · keine Kreditkarte