Skip to main content

Google: Indexierung ohne Crawlen

Google Schriftzug

Copyright @ Shutterstock/ Benny Marty

In einem Tweet teilte John Müller mit, dass Google Seiten indexieren kann, ohne diese zuvor gecrawlt zu haben. Wenn eine Seite per robots.txt gesperrt ist, aber von anderen Seiten verlinkt wurde, tritt dieser Fall ein. Dabei indexiert Google die Seite, erfasst jedoch die Inhalte nicht. Diese Website kann dann aber trotzdem in der Google-Suche gefunden werden. Diese Seiten werden dann in der Google-Suche ohne Description angezeigt weil der Crawler diese nicht erfasst hat. Nachfolgend findet ihr den Tweet von John Müller:

Quelle: Twitter.com 

Copyright @ Shutterstock/ Benny Marty

Kostenloser SEO-Check der OSG

Google: Indexierung ohne Crawlen
Beitrag bewerten


Ähnliche Beiträge


Keine Kommentare vorhanden


Du hast eine Frage oder eine Meinung zum Artikel? Teile sie mit uns!

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind markiert *

*
*