Crawling-Fehler

**Zille** · 15.12.2017, 09:20

Auf einer meiner Seiten kommt es immer wieder zu merkwürdigen Crawling-Fehlern. Die beunruhigen mich eigentlich nicht, aber ich weiß mit denen nüscht anzufangen. Da die allerdings seit Jahren in vielfältiger Form so im Abstand von ein- bis zwei Wochen wiederkehren, würde ich doch gerne wissen, was dahinter steckt. Hier ein Beispiel:
beispielname.htmlteil-vom-beispielname
Irgendwer oder -was hängt nach dem .html einfach weitere Buchstaben an, die zumeist auf einen in der URL genannten Namen beruhen. Ist das ein bekanntes Problem?

**Spooky** · 15.12.2017, 09:29

Vermutlich hat das nichts mit Contao oder deiner Website direkt zu tun. Welcher Crawler versucht diese URL aufzurufen?

**Zille** · 15.12.2017, 09:37

Auch wenn es nichts mit Contao direkt zu tun hat, so sollte ich doch weder bekannte noch unbekannte Fehler einfach ignorieren. Bin ja schließlich nicht die Bundesregierung.

Es wird mir von den GoogleWebmasterTools angezeigt.

**Spooky** · 15.12.2017, 10:00

Zitat von Zille

Es wird mir von den GoogleWebmasterTools angezeigt.

Was genau wird dir da angezeigt? Siehst du dort, woher Google diese URL hat?

**Zille** · 15.12.2017, 10:17

Ah ja, jetzt habe ich es gefunden.

Unter "Verlinkt über" ist zu sehen https://www.vebidoo.de/nachname/christopher+justin/info, und dort ist die richtige Link-Adresse unter Weblinks aufgeführt.
Mal abgesehen davon, das eine Namenssuche nach "Christopher Justin" auf "Justine" verweisst … wie kommen die komischen Buchstabenanhängsel zustande?

**xtra** · 15.12.2017, 13:00

Zitat von Zille

Ah ja, jetzt habe ich es gefunden.

Unter "Verlinkt über" ist zu sehen https://www.vebidoo.de/nachname/christopher+justin/info, und dort ist die richtige Link-Adresse unter Weblinks aufgeführt.
Mal abgesehen davon, das eine Namenssuche nach "Christopher Justin" auf "Justine" verweisst … wie kommen die komischen Buchstabenanhängsel zustande?

Eventuell war der Link dort falsch hinterlegt und wurde korrigiert.
Wenn deine Seite dann keinen 404 liefert, bleibt die URL in der Crawler Datenbank.

Dass du hier im ersten Posting im Thread die falsche URL hinterlegt hast, sorgt nun btw. auch dafyr, dass sie wieder aufgenommen wird sobald das Forum gecrawlt wird.