Heute hat Google eine neue Masche gefunden. Es kommen zu fast allen Contao-Installationen von Google folgende Mail:
Analyse:Code:Der Googlebot kann nicht auf CSS- und JS-Dateien auf http://www.domain.tld/ zugreifen An: Webmaster von http://www.domain.tld/
Alle CSS- und JS-Dateien auf der Seite sind ladbar und werden richtig adressiert.
Ursache der Meldung:
Google beruft sich auf meine robots.txt (Standard aus dem Core) und sagt, dass die CSS- und JS-Dateien nicht geladen werden dürfen, weil sie z.B. unter system/modules/Subcolumns/assets/yaml3/subcols.css oder system/Scripts zu finden sind (auch ladbar) und dieser Pfad in der robots.txt ausgeschlossen ist.
In meinen Augen kommt Google in dem Fall doch nicht als Robot und darf dann auch von dort lesen.
Lediglich die Indizierung soll verboten werden.
Gibt es dazu eine Lösung?