Indexierung Indexierung ist die Aufnahme einer Seite in den Datenbestand einer Suchmaschine, aus dem heraus Ergebnisse ausgeliefert werden. Sie ist nicht dasselbe wie Crawling: Eine Seite kann abgerufen und trotzdem nicht aufgenommen werden. Ohne Indexierung ist eine Seite über die Suche grundsätzlich nicht erreichbar.
Kurz-Fakten
Crawling und Indexierung sind zwei getrennte Schritte
Steuerbar über das Robots-Meta-Tag, nicht über die robots.txt
Suchmaschinen nehmen nicht jede erreichbare Seite auf
Prüfbar in der Search Console je einzelner Adresse
Bedeutung in der Praxis
Der zweite Punkt ist die häufigste Verwechslung überhaupt: Eine per robots.txt gesperrte Seite kann trotzdem im Index landen – ohne dass die Suchmaschine ihren Inhalt kennt. Wer eine Seite sicher heraushalten will, lässt sie crawlen und setzt noindex.
Wenn Seiten nicht aufgenommen werden, liegt es meist an dünnem oder doppeltem Inhalt, nicht an einem technischen Fehler.
Inhaber von SEO NW in Bertingen, Sachsen-Anhalt. Optimiert seit 2012 Websites für Suchmaschinen und arbeitet seit dem Aufkommen generativer Antwortsysteme an derselben Frage für Sprachmodelle: unter welchen Bedingungen ein Inhalt übernommen und der richtigen Quelle zugeschrieben wird. Schwerpunkt: technisches SEO, strukturierte Daten und Generative Engine Optimization.