SEO Glossar: Crawling
Was ist Crawling?
Crawling bezeichnet den Vorgang, bei dem Suchmaschinen wie Google das Internet systematisch durchsuchen. Dafür setzen sie sogenannte Crawler (auch Bots oder Spider genannt) ein — Programme, die automatisch von Seite zu Seite springen, den Inhalt erfassen und den Links auf jeder Seite folgen.
Googles Crawler heißt "Googlebot". Er besucht Milliarden von Webseiten, liest deren Inhalte, folgt internen und externen Links und speichert die gesammelten Informationen. Diese Daten werden anschließend verarbeitet und in Googles Index aufgenommen — dem gigantischen Verzeichnis, aus dem die Suchergebnisse zusammengestellt werden.
Crawling ist der erste Schritt im Dreiklang Crawling → Indexierung → Ranking. Wenn Google Ihre Seite nicht crawlen kann, wird sie nicht indexiert. Und was nicht indexiert ist, erscheint nicht in den Suchergebnissen.
Was bedeutet Crawling für Ihre Praxis-Website?
Google crawlt nicht jede Website gleich häufig. Große Nachrichtenportale werden mehrmals täglich besucht, kleine Websites vielleicht nur alle paar Wochen. Die Crawl-Frequenz hängt von mehreren Faktoren ab: Wie oft verändern sich die Inhalte? Wie viele externe Links verweisen auf die Website? Wie schnell antwortet der Server?
Für eine Praxis-Website bedeutet das: Wenn Sie eine neue Leistungsseite veröffentlichen, kann es Tage oder Wochen dauern, bis Google sie entdeckt und indexiert. Eine Sitemap beschleunigt diesen Prozess, weil sie dem Crawler eine vollständige Liste aller Seiten liefert.
Ebenso wichtig ist die Robots.txt. Sie steuert, welche Bereiche Ihrer Website gecrawlt werden dürfen. Ein Fehler in dieser Datei kann dazu führen, dass Google wichtige Seiten nicht besucht — oder seine Ressourcen auf irrelevante Bereiche verschwendet.
Crawling-Probleme erkennen
Die Google Search Console zeigt unter "Einstellungen > Crawling-Statistiken", wie oft und wie effizient Google Ihre Website crawlt. Dort sehen Sie, ob der Googlebot auf Fehler stößt — etwa Seiten, die nicht erreichbar sind, oder Serverantworten, die zu langsam kommen.
Typische Crawling-Probleme auf Praxis-Websites: Seiten ohne interne Verlinkung (Google findet sie nicht), defekte Links (Google stößt auf Sackgassen) und langsame Server (Google bricht das Crawling ab). Wie Sie diese Probleme beheben und Ihre Website technisch für Suchmaschinen optimieren, erfahren Sie im Beitrag SEO für Ärzte.
Fazit
Wenn Google Ihre Praxis-Website nicht crawlen kann, werden Ihre Seiten nicht indexiert und erscheinen in keinem Suchergebnis. Stellen Sie sicher, dass alle wichtigen Seiten intern verlinkt sind, eine aktuelle Sitemap vorhanden ist und die Robots.txt keine relevanten Bereiche blockiert — das ist die technische Grundvoraussetzung für Ihre Sichtbarkeit bei Google.
Über den Autor
Sven Huchel
Geschäftsführer & Creative Director
Seit 2005 entwickelt Sven Websites, Brandings und digitale Strategien für Unternehmen im deutschsprachigen Raum. TÜV-zertifiziert für Verkaufspsychologie. Spezialisiert auf verkaufspsychologisch optimierte Websites für Ärzte, Anwälte und Unternehmer.
Passende Fachartikel
Wie gut ist Ihre Website wirklich?
Ladezeit, Core Web Vitals, Mobile-Score, Barrierefreiheit, SEO-Basics und Bildoptimierung. Ergebnis per E-Mail oder im persönlichen Gespräch.