Crawling ist der Prozess, bei dem Suchmaschinen Deine Website systematisch durchsuchen und alle Seiten erfassen.
Was ist Crawling?
Crawling ist der Vorgang, bei dem Suchmaschinen wie Google das Internet systematisch durchsuchen. Dafür setzen sie Crawler ein, auch Bots oder Spider genannt. Das sind Programme, die automatisch von Seite zu Seite springen, den Inhalt erfassen und den Links auf jeder Seite folgen.
Googles Crawler heißt "Googlebot". Er besucht Milliarden von Webseiten, liest deren Inhalte, folgt internen und externen Links und speichert die gesammelten Informationen. Google verarbeitet diese Daten und nimmt sie in seinen Index auf. Aus diesem riesigen Verzeichnis entstehen die Suchergebnisse.
Crawling ist der erste Schritt in der Abfolge Crawling → Indexierung → Ranking. Kann Google Deine Seite nicht crawlen, wird sie nicht indexiert. Und was nicht indexiert ist, erscheint nicht in den Suchergebnissen.
Was bedeutet Crawling für Deine Praxis-Website?
Google crawlt nicht jede Website gleich oft. Große Nachrichtenportale besucht der Googlebot mehrmals täglich, kleine Websites vielleicht nur alle paar Wochen. Die Crawl-Frequenz hängt von mehreren Faktoren ab: Wie oft ändern sich die Inhalte? Wie viele externe Links verweisen auf die Website? Wie schnell antwortet der Server?
Für eine Praxis-Website heißt das: Veröffentlichst Du eine neue Leistungsseite, kann es Tage oder Wochen dauern, bis Google sie entdeckt und indexiert. Eine Sitemap beschleunigt das, weil sie dem Crawler eine vollständige Liste aller Seiten liefert.
Ebenso wichtig ist die Robots.txt. Sie steuert, welche Bereiche Deiner Website gecrawlt werden dürfen. Ein Fehler in dieser Datei kann dazu führen, dass Google wichtige Seiten nicht besucht. Oder Google verschwendet seine Ressourcen auf unwichtige Bereiche.
Crawling-Probleme erkennen
Die Google Search Console zeigt unter "Einstellungen > Crawling-Statistiken", wie oft und wie effizient Google Deine Website crawlt. Dort siehst Du, ob der Googlebot auf Fehler stößt, etwa auf Seiten, die nicht erreichbar sind, oder auf zu langsame Serverantworten.
Typische Crawling-Probleme auf Praxis-Websites: Seiten ohne interne Verlinkung (Google findet sie nicht), defekte Links (Google stößt auf Sackgassen) und langsame Server (Google bricht das Crawling ab). Wie Du diese Probleme behebst und Deine Website technisch für Suchmaschinen fit machst, liest Du im Beitrag SEO für Ärzte.
Fazit
Kann Google Deine Praxis-Website nicht crawlen, werden Deine Seiten nicht indexiert und erscheinen in keinem Suchergebnis. Verlinke alle wichtigen Seiten intern, halte die Sitemap aktuell und prüfe, dass die Robots.txt keine wichtigen Bereiche blockiert. Das ist die technische Grundlage für Deine Sichtbarkeit bei Google.
Letzte Aktualisierung:
