Können KI-Crawler JavaScript lesen?
JavaScript und KI-Crawler ist ein Sichtbarkeitsrisiko: Viele KI-Crawler rufen das HTML einer Seite ab, ohne ihr JavaScript auszuführen, sodass Text, der erst nach Skripten erscheint, für sie unsichtbar sein kann. Googlebot rendert JavaScript; bei KI-Crawlern ist die Unterstützung unterschiedlich und nicht immer dokumentiert. Serverseitiges HTML ist für wichtige Fakten die sichere Wahl.
So prüfst du es
Öffne die Seite ohne JavaScript oder rufe sie mit curl ab und sieh nach, ob Preise, Funktionen und Kernaussagen im rohen HTML stehen. Wenn nicht, rendere sie auf dem Server.
Beispiel: Eine Preistabelle, die per JavaScript nach dem Laden erscheint, fehlt, wenn ein Crawler nur das rohe HTML liest.
Verwandte Prüfungen
Prüfe auch, dass robots.txt und deine Firewall die Bots an die Seite lassen.
Prüfe, welche KI-Crawler deine Website zulässtKostenloser KI-Crawler-Check (auf Englisch): GPTBot, ClaudeBot, PerplexityBot und mehr.