Google beachtet nur die robots.txt im Wurzelverzeichnis

Veröffentlicht von Tim Lagemann 17.04.2018 · Kategorie(n): News, SEO

Google berücksichtigt nur robots.txt im Wurzelverzeichnis

Ein Twitter-Nutzer wunderte sich darüber, dass der Googlebot, laut Logfiles, auf robots.txt-Dateien von Unterverzeichnissen seiner Website zugreift. John Müller entgegnete, dass der Googlebot ausschließlich die robots.txt-Datei im Wurzelverzeichnis beachtet. Zu einem Zugriff auf robots.txt von Unterverzeichnissen kam es wahrscheinlich durch entsprechende Verlinkungen.

Aktivieren Sie JavaScript um das Video zu sehen.
Video-Link: https://twitter.com/JohnMu/status/986063194912378882

Über den Autor

Tim Lagemann studierte BWL mit dem Schwerpunkt Marketing an der Universität Osnabrück und ist seit Januar 2018 bei der Online Solutions Group GmbH in München tätig. Er betreut Kunden in den Bereichen SEO und Media.